to_csvで作成したファイルをread_csvで読み込むとサイズが異なっていた

Question

あるsizeが4194304のnumpy形式の数値データを2048×2048に変形し、DataFrame形式に変換したのちcsv形式で保存を試みました。しかし、そのcsvファイルを読み込んだところサイズが4192256（4194394より2048少なくなっている）になってしまっていました。

dark_image.size
>>> 4194304

square_dark = dark_image.reshape([2048, 2048])
square_dark.size
>>> 4194304

square_dark.to_csv('C:\Xmas\dark_image.csv', header=False, index=False)

df_csv = pd.read_csv('C:\Xmas\dark_image.csv')
df_csv.size
>>> 4192256

そこでcsvファイルを見てみるとBZT2048までデータが記載されているので2048×2048のデータはきちんと保存されていると考えられます。

また欠損値確認をしたところ欠損値はありませんでした。

df_csv.isnull().sum().sum()
>>> 0

これよりおそらくread_csvを行う段階で何らかのミスをしているものと思われるのですが、どなたか解決方法がわかる方がいればご教授願います。

Answer 1

to_csv でヘッダーをなくしているのであれば read_csv にも同等の指定をするのが筋では？
header = None が該当しそうです

Comments

[python_wakaran]

この通りに行ったところ解決しました。
1行目をheaderと認識してしまったことによって、サイズの違いが生じていたのだと理解しました。
アンサーしていただきありがとうございました。

Answer 2

元データにはスペースが入ってたりとか余計な文字はいってただけでは。

そもそもサイズ違ってなにか問題あるんでしょうか

Comments

[python_wakaran]

今回こちらのデータは2048×2048のピクセルデータを読み込んだものでした。ここで4194394が2048の2乗であることから１データでサイズが１と判定されていて、csv読み取り時にサイズが減っているということはデータが抜け落ちていることだと考えていました。個々の説明が足りていなかったこと、申し訳ありません。
jamjam3さんの方法で解決したので、スペースがあるなどではありませんでした。アンサーしていただきありがとうございました。