Pandasで重複行の削除

Question

Pandasで重複行を削除したいです

Pandasで重複行を削除したいと思い、df_train.drop_duplicates()を実行したのですが、
実行する前後で重複行の数が変わりません。重複行である”True”が59件から変わっておらず、これは重複行削除できていないですよね？
重複行を削除する方法を教えていただけると幸いです。

該当のソースコード

# データの読み込み
df_train = pd.read_csv('ファイルのパス')

#カウント
df_train.duplicated(keep=False).value_counts()
#出力　
#False    6357
#True       59
#dtype: int64

#重複行の削除
df_train.drop_duplicates()

#カウント
df_train.duplicated(keep=False).value_counts()

#出力　
#False    6357
#True       59
#dtype: int64

Answer 1

df_train.drop_duplicates()のオプションinplaceにTrueが与えられていないからです。
（デフォルトはFalse）
https://pandas.pydata.org/docs/reference/api/pandas.DataFrame.drop_duplicates.html
inplaceをTrueに設定するか、返り値を格納してから実行する必要があります。

Comments

[egpro]

ありがとうございます！
inplaceにTrueを与えてカウントしたら、
出力が

False 6384
dtype: int64

となりました。
もともと、6416サンプルで、重複が59サンプルだったので重複行を削除したら
6416-59＝6357
で6357サンプルになると思ったのですが、6384サンプル残ったのは
その重複した行の内容一つを残して、他の重複行が削除されたという考え方であっていますか？
つまりこの場合、27種類の重複があったということでしょうか

[PlugOut777]

> その重複した行の内容一つを残して、他の重複行が削除されたという考え方であっていますか？
> つまりこの場合、27種類の重複があったということでしょうか
元データがないので検証できませんが、そうだと思います。
またkeepというオプションで、残す行を決めることもできます。
keep=Falseにすると重複行を1行も残さず全て消すので、6357になると思います。

[egpro]

わかりやすくありがとうございました！
理解できました！