CSVファイルにencoding="utf-8"は使えない？

Question

windows10です。

以下のように入力して実行すると文字化けしたファイルが生成されます。
encoding="utf-8" の部分を除くと文字化けは解消します。

csvファイルはutf-8に対応していないのでしょうか？

import csv

with open("test.csv","w",encoding="utf-8",newline="") as file :
    csv_file = csv.writer(file,delimiter=",")
    csv_file.writerow(["こんにちは","そして","さようなら"])

Comments

[退会済みユーザー]

作成した CSV ファイルをメモ帳で開いてみましょう。

Answer 1

次のようにすると Excel で UTF-8 の CSV を開くことができるそうです。

【図解】エクセルだけで簡単にUTF-8のCSVを開く方法（Excel for Office 365） - Qiita

追記

BOM をつけるとそのまま開いても文字化けしないことを確認しました。
Python では次のように utf_8_sig で BOM をつけることができるようです。

PythonでUTF-8 with BOMのCSVファイルを出力する - Qiita

ただし、UTF-8 は BOM をつけないのが主流で、つけた場合には他のアプリケーションで開いた場合に正しく取り扱えない可能性もあります。出力した CSV を Excel 以外で使う場合には注意してください。

Comments

[Zuishin]

CSV 自体にはエンコーディングの概念はありません。それを開くソフトに合わせたエンコーディングで作成します。Excel の場合、デフォルトではいわゆるシフト JIS で開きますが、その他のエンコーディングにも対応しているので、このようにひと手間かかるけれど開くことはできます。

[Zuishin]

ベストアンサーはつけないけどこの方法を使うんだろうな。

Answer 2

エクセルはデフォルトだとshift_jisで読み込むので、utf-8で保存されているcsvは文字化けします。

Answer 3

csvファイルはutf-8に対応していないのでしょうか？

いいえ。

(BOMなしの)UTF-8で書かれたCSVファイルをダブルクリックで開くことに対応していないのは、Excelのほうです。(BOMなしの)UTF-8に対応しているアプリ(Python自身とかテキストエディターとか)で開けば、文字化けは起きません。

ExcelでUTF-8で書かれたCSVファイルを開くのであれば、

• 作成時にBOMを付ける。ダブルクリックで文字化けせずにCSVファイルを開ける。
• ダブルクリックで開くのではなく、Excel文書を開いてから(新規作成でもいい)、「データ」タブにある「テキストまたはCSVから」ボタンを押してPowerQueryエディターを利用する。読み込み時にエンコーディングを指定可能。BOMの有無にかかわらず文字化けせずにCSVファイルを読み込める。
• (古めのExcelでは)ダブルクリックで開くのではなく、Excel文書を開いてから(新規作成でもいい)、「データ」タブにある「テキストファイル」ボタンを押してテキストファイルウィザードを利用する。読み込み時にエンコーディングを指定可能。BOMの有無にかかわらず文字化けせずにCSVファイルを読み込める。

などの方法があります。

Answer 4

csvファイルはutf-8に対応していないのでしょうか？

そんなことはありません。文字化けしているテキストファイルの文字コードを確認しましょう。おそらくshift_jisになっているはずです。utf-8で扱いたいならメモ帳などで開いて文字コードを指定して保存してください。