df.ilocで謎の数が出力されてしまう

Question

実現したいこと

UZUDOのデータを取得してグラフを作成を作成したいと考えています．そのためにdf.ilocで特定の値を取り出したいと考えています．

前提

こちらのデータはPIV解析画像の約18000pixelから読み取った速度や渦度などのデータとなります．一つのエクセルデータに１秒分のデータが入っているため，１００個のエクセルデータを読み取って100秒での渦度の遷移をグラフ化しようと試みています．やることはテキストファイルをデータフレームで読み込み，特定の条件の値を読み取ることとなります．

発生している問題・エラーメッセージ

データフレームで表示されている値と違う値がdf.ilocで出力される．

該当のソースコード

df = pd.read_table(
                filename,
                encoding="shift-jis",
                sep=",",
                skiprows=[0,1,2,3,4,5,6,7,8,9],
                names=["NoJ","NoI","startX","startY","endX","endY","velocity","degree","velocityX","velocityY","UZUDO","HASSANRYO"])

print(df)
print(df.iloc[0,8])

試したこと

ぐぐってもこの問題に似たものが出てきませんでした．df.locを使うとKey errorがでてしまってどちらもうまくいきませんでした．データ数が多いのが原因なのかもしれません．

補足情報（FW/ツールのバージョンなど）

print(df)の出力結果
startX startY endX endY velocity degree velocityX velocityY UZUDO HASSANRYO
0 20.0 320.0 16.423 320.001 0.088 179.992 -0.088 0.000 0.000 0.000
1 25.0 320.0 21.576 319.631 0.085 -173.843 -0.084 -0.009 0.000 0.000
2 30.0 320.0 26.265 319.340 0.093 -169.973 -0.092 -0.016 0.000 0.000
3 35.0 320.0 31.568 319.111 0.087 -165.474 -0.084 -0.022 0.000 0.000
4 40.0 320.0 36.708 319.001 0.085 -163.116 -0.081 -0.025 0.000 0.000
... ... ... ... ... ... ... ... ... ... ...
18099 1235.0 680.0 1234.669 678.687 0.033 -104.173 -0.008 -0.032 0.002 0.005
18100 1240.0 680.0 1239.694 678.688 0.033 -103.125 -0.008 -0.032 0.006 -0.005
18101 1245.0 680.0 1244.768 679.017 0.025 -103.256 -0.006 -0.024 0.212 0.183
18102 1250.0 680.0 1249.707 678.866 0.029 -104.494 -0.007 -0.028 -0.061 -0.121
18103 1255.0 680.0 1254.728 678.216 0.044 -98.672 -0.007 -0.044 -0.299 -0.481

print(df.iloc[0,8])の出力結果
-1.173

Comments

[melian]

read_table で以下のカラム名を指定してますが、df の表示結果に "NoJ" と "NoI" が含まれていません。これは質問文を作成する際の転記ミスでしょうか？

names=["NoJ","NoI","startX","startY","endX","endY","velocity","degree","velocityX","velocityY","UZUDO","HASSANRYO"])

[jbpb0]

コードの最後に下記を追加して実行したら、何て表示されますでしょうか？

print(df.info())

[babaa]

コメントありがとうございます。No.JとIは最初のテキストで乗っている番号で、使わないため最初に削除するコードを設けています。また、問題はvscodeを開き直してみたら問題なく動きました。なぜ謎の数が出力されたかは不明ですが...

Answer 1

まず、データの読み込み部分は問題なさそうです。print(df)で正常に出力されていることがわかります。
しかし、print(df.iloc[0,9],number)で謎の数が出力されているということですが、このコードでは number という変数が定義されていません。

print(df.iloc[0,9]) の出力結果が -1.173 となっており、これはデータフレームの最初の行（インデックス0）と10番目の列（インデックス9）の値です。これはvelocityYの列の値です。

もし他の列の値を取得したい場合は、インデックスを変更してください。
例えば、velocityの値を取得したい場合は、print(df.iloc[0, 6])とします。

また、number変数が定義されていないため、print(df.iloc[0,9],number)の部分でエラーが発生していると思われます。number変数を定義してから再度実行してみてください。
どのような値を出力したいかによって、number変数の定義が異なります。
もし具体的に何をしたいか教えていただければ、より具体的な回答ができるかと思います。

Comments

[babaa]

問題点追記しました．先程記入していたnumberはファイル番号とデータが一致しているかを確認するために記入していました．例50番目(５０秒目)のデータならば0.05,50みたいに表示されます．ですのでnumberに問題はありません．
続いてdf.iloc[0,9]ではindex = 1, colums = 9番目のHASSANRYOが得られると思っていましたが認識違いですか？
状況をわかりやすいように追記しましたので，改めて検討していただけると幸いです

[GPT-4man]

この問題を解決するために、まずはdf.head()を使ってデータフレームの最初の5行を表示してみてください。
これにより、データフレームの最初の数行が正しく表示されていることを確認できます。
print(df.head())

次に、ilocを使わずにlocを使って値を取得してみてください。
インデックス0のHASSANRYOの値を取得するには、以下のように書きます。
print(df.loc[0, "HASSANRYO"])

おっしゃる通り、print(df)の出力結果とprint(df.iloc[0,9])の出力結果が一致していないことが問題のようですね。この問題を解決するために、まずはdf.head()を使ってデータフレームの最初の5行を表示してみてください。これにより、データフレームの最初の数行が正しく表示されていることを確認できます。

print(df.head())
次に、ilocを使わずにlocを使って値を取得してみてください。インデックス0のHASSANRYOの値を取得するには、以下のように書きます。

print(df.loc[0, "HASSANRYO"])
これで、print(df)の出力結果と同じ値が表示されるはずです。
もしlocを使っても正しい値が取得できない場合は、データフレームのインデックスが連続していない可能性があります。
インデックスをリセットしてから再度ilocやlocを使って値を取得してみてください。
df.reset_index(drop=True, inplace=True)
print(df.iloc[0, 9])

これで、ilocで取得される値が正しくなるはずです。
それでも問題が解決しない場合は、データの読み込み時に問題が発生している可能性がありますので、再度データの読み込み部分を見直してみてください。

[babaa]

ありがとうございます。データの読み込みを見直すと言いますか、vscodeを再起動させてみたところ何故かうまく動きました！親身にありがとうございましたm(*_ _)m