python DataFrame 型の変更

Question

前提・実現したいこと

エクセルからデータを取り込み
↓
取り込んだデータ内のNoと時間の列を参照
↓
同じNoの時間を全て合算
↓
csvデータへ書き込みをしようと考えています。

発生している問題・エラーメッセージ

データを取り込むと

と出るのですが、typeがobjectとなっています。

pd.to_datetimeにてdtype: datetime64[ns]への変換を試みましたが
以下のエラーが発生します。

typeを変更出来ればgroupbyを用いで合算できるのではないかと考えていますが
その前で躓いています。

ご教授お願い致します。

Comments

[meg_]

エラーメッセージを見る限り(KeyError:'時間')、対象の列が存在しないとしか思えませんが。

[nao0405]

ご回答ありがとう御座います。
仮にpd.DataFrameにて同様の表を入力し、to_datetimeにて変換を行うと正常に処理が出来ました。
なので記述等的には問題無いかなと考えその他の解決策や誤りが無いかわからず
問い合わせをさせて頂きました。
他の方法含め模索したいと思います。

Answer 1

• typeを変更出来ればgroupbyを用いで合算できるのではないかと考えていますが

それだけでできるほど簡単な問題ではありません。

理由
0. Excelには時間という表記はあるがそれは時刻であり時間ではない。
0. Pythonの時間処理のdatetime.timeは足し算も引き算もできない。

そのため、以下のようにかなり複雑な処理が必要になります。

>>> from datetime import timedelta
>>>
>>> def td_format(td):
...     total_seconds = int(td.total_seconds())
...     seconds = total_seconds % 60
...     total_minutes = total_seconds // 60
...     minutes = total_minutes % 60
...     hours = total_minutes // 60
...     return f'{hours:02}:{minutes:02}:{seconds:02}'
...
>>> print(df)
        No        時間
0  9144020  07:50:00
1  9144030  06:00:00
2  9144030  04:00:00
>>> print(df['時間'])
0    07:50:00
1    06:00:00
2    04:00:00
Name: 時間, dtype: object
>>> df['時間'] = df['時間'].apply(lambda t: timedelta(hours=t.hour, minutes=t.minute, seconds=t.second))
>>> df_output = df.groupby('No').sum()
>>> df_output['時間'] = df_output['時間'].apply(td_format)
>>> df_output.reset_index(inplace=True)
>>> print(df_output)
        No        時間
0  9144020  07:50:00
1  9144030  10:00:00

データが画像なので3行だけです。

Comments

[nao0405]

ご丁寧な回答ありがとう御座います。
＞Excelには時間という表記はあるがそれは時刻であり時間ではない。
＞Pythonの時間処理のdatetime.timeは足し算も引き算もできない。
独学を始めた初心者な者で大変勉強になります。
ご提案頂いた内容にて1度試したい思います。
また、今回例に挙げていませんが、時間を10進で表した物を元データ(Excel)には格納しています。
そちらを用いて合算する方法も試してみたいと思います。

[ppaul]

時間と時刻の違いは理解できていますか。
朝の8時に1時間かけて朝食を食べたときの朝8時は時刻で、1時間は時間です。
蛭の12時に1時間かけて朝食を食べたとしましょう。
1時間と1時間を足した2時間は合計の食事時間ですが、8時と12時を足して20時を出したとしてもその数字には意味がありません。
Excelはその区別がないのが問題です。
Pythonのdatetime.datetimeとdatetime.timedeltaは時間と時刻を表しているのでExcelよりマシなのですが、datetime.timeは時刻であるにもかかわらず、引き算ができないので、今回はそこが障害となっています。
時間を10進で表すというのが130で1時間30分を表しているのであれば130と140の合計の処理をどうするのかをやるのが大変ですよ。

[nao0405]

補足ありがとう御座います。
ご回答頂いた内容で狙い通り事が出来ました。
ご丁寧にありがとう御座います。