csvファイルの読み取り

Question

###前提・実現したいこと
初めましてプログラムをはじめて間もないのですが、
現在csvファイルからデータを読み込みグラフを表示するプログラムを作っています。
csvは以下ののようになっています。（ファイル名は　"日付".csv）

7:00 56.7
7:01 56.5
: :
: :
10:00 50.1

###発生している問題・エラーメッセージ
グラフは問題なく表示できるのですがX軸が時間表示されません。
データの個数で表示されているようです。
これを時間に修正したいのですが、よくわかりません。

###該当のソースコード
#!/usr/bin /env python
import matplotlib.pyplot as plt
import pandas as pd
import datetime

d = datetime.datetime.today()
ymd = d.strftime("%Y%m%d")

A=pd.read_csv("/var/www/tempX/"+ymd+"b.csv")

plt.figure(figsize=(8,5))
plt.plot(maker="o")
plt.clf()
plt.title("A Line Temperature")
plt.xlabel("time")
plt.ylabel("temp")
plt.ylim([30,70])
plt.plot(A.T.values[1])

plt.show
plt.savefig(ymd+"B.png")

###試したこと

###補足情報(言語/FW/ツール等のバージョンなど)
python2で実行

Answer 1

３点ほど。

１． pandasにてCSVデータを読み込む際に、0行目のデータを時系列データとして読み込んでください。
やり方としては、read_csv()の引数に parse_dates=[0]を記述するだけで時系列データとして読み込めると思います。

A=pd.read_csv("/var/www/tempX/"+ymd+"b.csv", header=None, sep=' ', parse_dates=[0])
print(A.head())
# =>                     0     1
#    0 2017-10-12 07:00:00  56.7
#    1 2017-10-12 07:01:00  56.5
#    2 2017-10-12 07:02:00  56.5
#    3 2017-10-12 07:03:00  56.5
#    4 2017-10-12 07:04:00  56.5

print(A[0].dtype)
# => datetime64[ns]

質問文のデータ形式に合わせて、上のコードでは セパレータをスペース(sep=' ')、ヘッダー部を無し(header=None) を指定しております。

２． plot()の引数にはXデータとYデータの両方を渡してください。
Yデータのみを渡すと、X軸は自動的に 0からのカウントデータになってしまいますので、X軸には上記で設定した1列目の時系列データを渡してください
あと細かいですが、

• A.T.values[1] は A[1] でＯＫ
• marker = 'o' は データを渡すときに一緒に記述する

です。

# コレを
# plt.plot(A.T.values[1])
# ↓に修正
plt.plot(A[0], A[1], marker='o')

３．
時系列データをプロットすると軸の区切り間隔がおかしくなりますので、X軸に時系列用のlocatorを設定してください。
また、時刻ラベルのフォーマットを時系列用の formatter にて併せて設定しておくと良いかと思います。

https://matplotlib.org/api/dates_api.html

例えば、今回の場合は区切り間隔を１時間毎にすると適当かと思いますので、
locatorとして mdates.HourLocator()を設定します。
またこの際に、formatter を DateFormatter('%H:%M') しておくとよいでしょう。

以上をまとめるとこんな感じになるかと思います。

import matplotlib.pyplot as plt
import matplotlib.dates as mdates
import pandas as pd
import datetime

d = datetime.datetime.today()
ymd = d.strftime("%Y%m%d")

A=pd.read_csv("/var/www/tempX/"+ymd+"b.csv", header=None, sep=' ', parse_dates=[0])

fig = plt.figure(figsize=(8,5))
ax = fig.add_subplot(111)
ax.set_title("A Line Temperature")
ax.set_xlabel("time")
ax.set_ylabel("temp")
ax.set_ylim([30,70])
# １時間毎に目盛り追加（Major）
ax.xaxis.set_major_locator(mdates.HourLocator())
ax.xaxis.set_major_formatter(mdates.DateFormatter('%H:%M'))
# 10分ごとの目盛り追加(Mitor)
ax.xaxis.set_minor_locator(mdates.MinuteLocator([10,20,30,40,50]))
ax.plot(A[0],A[1], marker='o')

plt.show()
plt.savefig(ymd+"B.png")

Comments

[ketchup]

なるほど、なんとなくイメージができました。
ありがとうございました。

Answer 2

Pandas も matplotlib も使ったことがないので変なことをしていたらすみませんが、公式サンプルを見ると set_major_formatter() を使うと軸の書式を設定できるようです。

また Pandas にデータを取り込む際、第1カラムをヘッダかつ時刻データであることを定義して意味を持たせる方が、今後データを扱う上でなにかと便利だと思います。

from matplotlib.dates import DateFormatter
from matplotlib import pyplot as plt
import pandas as pd


A = pd.read_csv(
    '20171011b.csv', header=None,
    names=['Time', 'Temperature'], index_col='Time', parse_dates=True)

ax = plt.subplot()
ax.set_title("A Line Temperature")
ax.set_xlabel("time")
ax.xaxis.set_major_formatter(DateFormatter('%H:%M'))
ax.set_ylabel("temp")
ax.set_ylim(30, 70)
ax.plot(A)
plt.show()

Comments

[ketchup]

なるほど、シンプルな表現でできるのですね。
ありがとうございました。