"name"の、「"」と「n」の間にある、空白のない一文字分ってなんていうんですか？

Question

前提・実現したいこと

タイトル通りの質問です。"name"　←をカーソルで動かしていると、
間に一個分見えない文字があるかのような挙動になります。

Windowsのメモ帳で作ったサンプルのCSVファイルをインポートする機能を作っていたんですが、
"name"の表記が変なのでバリデーションに引っかかってしまいます。
多分メモ帳の冒頭になんかあるんだと思いますが、自分では確認できませんでした。

どうすればいいでしょうか？以下エラーのコンソールです。

発生している問題・エラーメッセージ

>>  row
=> #<CSV::Row "name":"餃子を作る" "description":"160個作ります" "created_at":nil "updated_at":nil>
>>  row.to_hash
=> {"name"=>"餃子を作る", "description"=>"160個作ります", "created_at"=>nil, "updated_at"=>nil}
>>  row.to_hash.slice("name", "description", "created_at", "updated_at")
=> {"description"=>"160個作ります", "created_at"=>nil, "updated_at"=>nil}
>>  row.to_hash.slice("name", "description", "created_at", "updated_at")
=> {"name"=>"餃子を作る", "description"=>"160個作ります", "created_at"=>nil, "updated_at"=>nil}

↑
一つ目のrow.to_hash.sliceの引数は直打ち、二つ目は二行目のCSV::Row以後の"name"をコピペした結果です。

Answer 1

Windowsのメモ帳(Windows10の最新版を除く)で、UTF-8の形式でファイルを保存すると、先頭にBOMという3バイトのゴミが付いてしまいます。

解決策としては、メモ帳以外のエディタを使って保存するか、ファイル先頭が`"\xef\xbb\xbf"だったら読み飛ばすか。

BOMは、UTF-16やUTF-32において、バイトの順番（上位バイトが先か後か）を示すものですが、UTF-8では単なるゴミです。

Comments

[kyotoinrn]

素早いご回答ありがとうございます！

Answer 2

メモ帳で作ったcsvとのことで、
ゼロ幅空白(zero width no-break space)がBOMとして先頭に置かれているのかと思います。

CSVを開く時にencode指定をしてください

Comments

[kyotoinrn]

素早いご回答ありがとうございます！

[kyotoinrn]

引用先のBOM|UTF-8を追記してみたのですが、

unknown encoding name - bom|utf-8

と言われてしまいます…。バグは治っていると記載があるのですが、なぜでしょう…？

[asm]

gem update csv
でcsvをアップデートするとよいでしょう。

[kyotoinrn]

Installed at (3.0.4): .rbenv/versions/2.5.1/lib/ruby/gems/2.5.0
(1.0.0, default): .rbenv/versions/2.5.1/lib/ruby/gems/2.5.0

アップデートしたんですが、defaultが変わらず上手くいきません。これ直接コードいじるしかないんでしょうか？うまい具合にコマンド指定できませんかね？

[kyotoinrn]

Rails内のGemfileに改めて記載して上書きしたら登録出来ました、ありがとうございました…！

その前にgem uninstall csv -v '1.0.0'としてみたんですが消えませんでした。rbenv内だと消せないんですかね…？それかデフォルト指定入ってるから消えなかったのか…

他のお二方もありがとうございました。

[asm]

ruby標準添付のライブラリなので消すことはできません
確かにRailsですと、bundlerを介すのでGemfile内にバージョン指定が必要ですね

Answer 3

コピペして確認しましたが、UTF-8のBOMだと思います。

見ましたがBOMを付けない選択肢がないようなので、メモ帳以外のエディタで編集するのがよいと思います。

Comments

[papinianus]

https://qiita.com/MuriNishimori/items/a89fe986e28909208e30

[kyotoinrn]

素早いご回答ありがとうございます！