pyhton3で文字化けと戦っています

python
1    item=[[0,⁉],[1,'瀬頭达子'],[3,'⁈']]
2    with open("test.csv", 'a',encoding="shift_jis") as f:
3        for item in items:
4            f.write("\n") 
5            for row in item:
6                f.write(str(row).replace(',', ';')+ ',')

最終的にはExcelで見たいと思っています。
Listには日本語、英語だけでなく中国語や韓国語も混じっている可能性はあります。

UnicodeEncodeError: 'shift_jis' codec can't encode character '\u2048' in position 0: illegal multibyte sequence
UnicodeEncodeError: 'shift_jis' codec can't encode character '\u7eaa' in position 2: illegal multibyte sequence

などのエラーが出て書き込みが失敗します。

python
1f.write(str(row).replace(',', ';')+ ',')

この辺でencodeをしたらイケるかと思いましたがダメでした。

例外を省くなどは量が多すぎのでなんとかしたいので教えて頂きたいです。

＊excelで開くとutf-8では全部文字化けしてしまったので,encoding="shift_jis"にしています。

Luke02561

2020/06/08 08:58

エラー全文をお願いします

Yuiti628

2020/06/08 09:25

UnicodeEncodeError: 'shift_jis' codec can't encode character '\uff5e' in position 11: illegal multibyte sequence など、1行がエラーの全文になります

quickquip

2020/06/08 09:37

「Shift-JISで扱えない文字を消すことでわけが分からなくなったとしてもどうせ不要だから積極的に消したい」のか「取り扱えるならそれでもいいけどよくわからないから消すことにしてしまっている」のかという方向性がハッキリしないと思いました。エラーのトレースバックを全部出しましょう（ユーザ名などは置き換えてもいいですが）。

行動規範の内容に同意します

回答2件

ベストアンサー

エンコードはUTF-8にしてください。Unicodeの文字集合にはあり、JISにはない文字を保存できなくてエラーが起きています。
Excelでcsvファイルを読むときに、csvファイルをダブルクリックしていませんか?
Excelを先に起動して、データタブのボタンからcsvファイルを取り込んでください。すると、途中でエンコードを指定することができるので、「65001:Unicode (UTF-8)」を選べば文字化けしません。

投稿2020/06/08 09:02