文字コードエラーの修正方法について

Question

下記の実行をしたところ、文字コードのエラーが出ており、修正方法が分からず悩んでおります。。

【実装コード】

import pandas as pd

r_cols = ['user_id', 'movie_id', 'rating']
ratings = pd.read_csv('C:/Users/Desktop/DataScience/ml-100k/u.data', sep='\t', names=r_cols, usecols=range(3))

m_cols = ['movie_id', 'title']
movies = pd.read_csv('C:/Users/Desktop/DataScience/ml-100k/u.item', sep='|', names=m_cols, usecols=range(2))

ratings = pd.merge(movies, ratings)

ratings.head()

【エラー内容】
UnicodeDecodeError: 'utf-8' codec can't decode byte 0xe9 in position 3: invalid continuation byte

Answer 1

今書いてるコードだとプログラムはUTF-8の文字コードとして読み込もうとしているので、Shift_JISなどの別の文字コードのCSVだと認識できません。
元データはexcelから作ったcsvであればたぶんshift_JISとかになってる可能性が高いです。

この記事参考にしてみてください
https://qiita.com/redAlgae/items/5a7973ed3338d2a100b2

Answer 2

読み込んでいるファイルのナカミの文字がUTF8ではない、と言ってるようですが