ISO8601形式を読み込む方法

Question

時系列データファイルを読み込んでグラフ化しようとしています。

ISO8601形式(例:2020-06-28T00:30:45.950)で書かれたタイプスタンプを読み取り、グラフ化しようとしていますが、うまくいきません。

発生している問題・エラーメッセージ

DATE Value
2020-06-21T14:35:00.000 55.111
2020-06-21T14:35:00.500 55.888
2020-06-21T14:35:00.100 54.988
.
.
.

の様なファイル(hoge1.txt)を読み込んで、横軸に時間、縦軸に値を書きたいのですが、うまくいきません。

試したこと

import numpy as np
import matplotlib as mpl
import matpltlib.pyplot as plt

Read the data (txt format)
tr = np.loadtxt("./hoge1.txt", skiprows=1)
t = tr[:,0]
tr_value = tr[:,1]

と書いてみましたが、
could not convert string to float '2020-06-21T14:35:00.000'
とエラーが出てしまいます。
文字列を読み込んでくれる方法はあるでしょうか。

補足情報（FW/ツールのバージョンなど）

ubuntu18.04LTS, python3.6.9

Answer 1

numpy でもできないことはないですが、数値以外のデータが混じっている CSV ファイルの読み込みは pandas を使ったほうが簡単です。

pandas を使う場合

import pandas as pd

df = pd.read_csv("sample.csv", parse_dates=[0])
# parse_dates=[0] は1列目を datetime 型として解釈するということ
print(df)

numpy を使う場合

Structured arrays として読み込むため、dtype に列名と型の指定が必要になります。

dtype={"names": ("Date", "Value"), "formats": ("datetime64[us]", "float")

import numpy as np


data = np.loadtxt(
    "sample.csv",
    delimiter=",",
    skiprows=1,
    dtype={"names": ("Date", "Value"), "formats": ("datetime64[us]", "float"),},
)
print(data)
print(data.dtype)
# [('2020-06-21T14:35:00.000000', 55.111)
#  ('2020-06-21T14:35:00.500000', 55.888)
#  ('2020-06-21T14:35:00.100000', 54.988)]
# [('Date', '<M8[us]'), ('Value', '<f8')]

# 列のアクセス
print(data["Date"])
print(data["Value"])

Comments

[rikuj]

ありがとうございました。

[tiitoi]

解決済みであれば、お手数ですが質問をクローズしてください