エンコードが同じなのにUnicodeDecodeError出てしまう

Question

修正内容

Sample.csvの写真の追加
「両方」が何と何かについての記載の追加
「別コード」の訂正

質問の経緯

csvファイルを読み込むコードを実行してみるとUnicodeDecodeErrorが出てしまい、
解決しようと調べても理解できず、自力では解決できないと考えたため、質問しました。
以前にテキストファイルの文字が文字化けみたいになった際はFiles: Auto Guess Encoding　をオンにしてできましたが、今回はできず、エンコードが「Sample.py」と「Sample.csv」の両方ともにutf-8なのにエラーが出てしまいます。

コード

コード#import csv
f = open('Sample.csv','r')

rd = csv.reader(f)

for row in rd:
    for col in row :
        print(col,end = ',')
    print()
f.close()

csvファイル

東京,鉛筆,25
東京,消しゴム,30
名古屋,ノート,56
大阪,定規,100
福岡,ノート,73

写真

環境

python3.9.5
エディタ:vscode
windows10

Comments

[meg_]

Sample.csvの文字コードは本当にutf-8ですか？

[gagagalu]

以前このcsvファイルの内容を書いて作った際、文字化け？みたいになったしまい、そこでFiles: Auto Guess Encodingを導入したら治りました。Sample.csvの写真を掲載させていただきます。

[quickquip]

エラーのTracebackを省略せずに質問に載せましょう。

[gagagalu]

写真のターミナルでよろしいでしょうか？

[ikadzuchi]

> 以前に別のコードでエンコードのエラーが出た際はFiles: Auto Guess Encoding　をオンにしてできました
別のコードとはどのようなコードですか?
Files: Auto Guess Encodingをオンにしたとは、何のファイルに対してオンにしたのですか?
できましたとは、何ができたのですか?
> エンコードが両方ともutf-8
両方ともとは、何と何ですか?

[gagagalu]

> 以前に別のコードでエンコードのエラーが出た際はFiles: Auto Guess Encoding　をオンにしてできました
別のコードとはどのようなコードですか?

すいません、別のコードじゃなくてテキストファイルでした。訂正します。それを読み込んだ際、テキストファイルの文字が文字化けみたいになり、Files: Auto Guess Encodingをオンにしたところ、治りました。
-------------------------------------------------------------------------------
>Files: Auto Guess Encodingをオンにしたとは、何のファイルに対してオンにしたのですか?

Files: Auto Guess Encodingは自動だと思うので、「何に」というのはわかりません。
---------------------------------------------------------------------
> エンコードが両方ともutf-8
両方ともとは、何と何ですか?

二つの画像の「Sample.py」と「Sample.csv」のファイルです

Answer 1

Files: Auto Guess Encodingは、VSCodeのオプションであってpythonがファイルを読み込む場合には何の関係もありません。

公式ドキュメント open に書かれているように、

テキストモードでは、encoding が指定されていない場合に使われるエンコーディングはプラットフォームに依存します:locale.getpreferredencoding(False) を使って現在のロケールエンコーディングを取得します。

です。Linuxの場合には'utf-8'、Windowsの場合には'cp932'となります。

Pythonからファイルを読み込む場合は、ishina_yumさんが書かれているようにencoding="utf-8"をつけましょう。

Answer 2

f = open('Sample.csv','r')

にencoding指定を付けましょう。

f = open('Sample.csv','r', encoding="utf-8")

Comments

[gagagalu]

回答ありがとうございます。できました。
なぜ、両方ともutf-8なのに指定するとできたのかわかりません

[ishina_yum]

ファイル入出力の文字エンコーディングはWindows版のPythonではcp932になっているものじゃないんですかね。

他の言語でもそうですけれど、大概の場合はソースファイルを記述している文字エンコーディングと、ファイル入出力で使用するデフォルトの文字エンコーディングは別物です。

尚、今回の質問文にあるソースコードはASCII文字しか使っていないので、Shift-JISかUTF-8かの区別はつかないと思います。

[gagagalu]

ありがとうございます。わかりました