python：Dataframeを使ってcsvファイルを出力する→出力結果が不足しているときの対処法

Question

ヘディングのテキストpython、pandas,Dataframe

を使用してデータをcsvファイルに出力しました。

本来ならば1700行出力されるはずのデータが200行しか出力されません。
出力行数などに限度はあるのでしょうか。

また解決案などはございますでしょうか。
お助けよろしくお願いします。

filei0_pivot = filei0.pivot_table(index=['Area', 'Element','Item'], columns='Year Code', values='Value').reset_index()
print(filei0_pivot)
filei0_pivot.to_csv('faostat_pivot_full.csv')

Comments

[coco_bauer]

csvファイルに出力しようとしているのはピボットテーブル(集計結果テーブル）だと思われます。ピボットテーブルの行数は、その元になったデータの行数より少ないのが普通です。1700行がピボットテーブルの行数で間違いないですか？元になったデータが1700行だったりしませんか？

[takahashi-tiger]

コメントありがとうございます。
元データの行数は3万ほどありますので、集計結果の予定行数が1700ほどで間違いないです
Jupyter Notebookを使用しているのですが、print(filei0_pivot)で画面上に出力したデータには1700行が表示されます。（－－－－で途中省略されておりますが、、）その全体像をcsvファイルで出力したいのです

[magichan]

まずは print(filei0_pivot.shape) にてDataFrameの(行数、列数)を表示してて、DataFrame自体のサイズを確認してみてください。

[takahashi-tiger]

行数、1637
列数、59でした。

Answer 1

PandasのDataFrameでto_csv()を使って、1700行あるものが200行しか出力されないということは通常考えられないです。まず、次のコードで出力したcsvファイルをDataFrameに読み込んで行数、列数を確認してみてください。

df = pd.read_csv('faostat_pivot_full.csv')
print(df.shape)

その結果dfが本当に200行しかないということであれば、df と filei0_pivot を比較してどうなっているかを質問に具体的に追記してください。