質問をすることでしか得られない、回答やアドバイスがある。

15分調べてもわからないことは、質問しよう!

新規登録して質問してみよう
ただいま回答率
85.53%
Python

Pythonは、コードの読みやすさが特徴的なプログラミング言語の1つです。 強い型付け、動的型付けに対応しており、後方互換性がないバージョン2系とバージョン3系が使用されています。 商用製品の開発にも無料で使用でき、OSだけでなく仮想環境にも対応。Unicodeによる文字列操作をサポートしているため、日本語処理も標準で可能です。

pandas

Pandasは、PythonでRにおけるデータフレームに似た型を持たせることができるライブラリです。 行列計算の負担が大幅に軽減されるため、Rで行っていた集計作業をPythonでも比較的簡単に行えます。 データ構造を変更したりデータ分析したりするときにも便利です。

Q&A

1回答

848閲覧

for文を使用して連続的にファイルを読み込みたいです

Mattn

総合スコア1

Python

Pythonは、コードの読みやすさが特徴的なプログラミング言語の1つです。 強い型付け、動的型付けに対応しており、後方互換性がないバージョン2系とバージョン3系が使用されています。 商用製品の開発にも無料で使用でき、OSだけでなく仮想環境にも対応。Unicodeによる文字列操作をサポートしているため、日本語処理も標準で可能です。

pandas

Pandasは、PythonでRにおけるデータフレームに似た型を持たせることができるライブラリです。 行列計算の負担が大幅に軽減されるため、Rで行っていた集計作業をPythonでも比較的簡単に行えます。 データ構造を変更したりデータ分析したりするときにも便利です。

0グッド

0クリップ

投稿2022/11/05 14:50

前提

for文を使用して数百あるファイルを連続的に読み込んで、解析時間を短縮したいです。

実現したいこと

pandasのread_text_file = pd.read_csv()を使用してテキストファイルを読み取っているのですが、ファイル数が数百あるので連続的にfor文を使用して文中でテキストファイル名を変更して自動化できないかと考えています。そこで、下記のコードのように試作としてfor i in range(1, 4):でiという変数を1~3まで連続的に変化させて、その次の行にあるname="No"+str(i)+".txt"でファイル名にしています。その後、read_text_file=pd.read_csv(r"name")でnameでつけたファイル名を使用しようとしたのですが、FileNotFoundError: [Errno 2] No such file or directory: 'name'というエラーが発生してしまいました。
その他、コード内にあるname1,name2,name3,name4,name5もfor文で中身を変更できたらと思っています。
この場合の解消法を教えていただけたらと思います。

発生している問題・エラーメッセージ

FileNotFoundError: [Errno 2] No such file or directory: 'name'

該当のソースコード

Python

1pip install plotly==5.10.0 #グラフ描画用ライブラリのインストール 2 3import pandas as pd 4import plotly 5import plotly.graph_objs as go 6import numpy as np 7from plotly.subplots import make_subplots 8 9for i in range(1, 4): 10 name = "No" + str(i) + ".txt" 11 read_text_file = pd.read_csv (r"name") # テキストファイルの読み込み 12 name1 = "No" + str(i) + ",csv" 13 read_text_file.to_csv (r"name1", index=None) # テキストファイルをcsvにコンバート 14 15 df = pd.read_csv("name1", header=None, sep="\s+") # csvをDataFrameに代入する、今回の場合はcsvにheaderがないのでNoneを指定 16 17 labels = ["TIME", "CH1", "CH2", "CH3", "CH4"] # 辞書用に列名のリストを作成しておく 18 labels_dict = {num: label for num, label in enumerate(labels)} # csvのheaderがないのでリストから辞書を作成しておく 19 df = df.rename(columns = labels_dict) # DataFrameのカラム名を変更 20 name2 = "No" + str(i) + "_comp.csv" 21 # カラム名を追加したデータフレームをcsvファイルとして保存する。 22 df.to_csv("name2", index=False) 23 24 df = pd.read_csv("name2") # カラム名を追加したcsvを読み込み 25 name3 = "No" + str(i) + "_comptest.csv" 26 new_file2 = "name3" # 後で別名のcsvを出力するために定義 27 28 df["THL"] = ((((df["CH1"] - 988) + (df["CH3"] - 988) + (df["CH2"] - 988) + (df["CH4"] - 988)) / 4)/ 820)*100 29 #df["THL"] = ((((df["CH1"] - 1252) + (df["CH3"] - 1252) + (df["CH2"] - 1252) + (df["CH4"] - 1252)) / 4)/ 556)*100 # 既存のcsvの1列から4列の数値で計算した結果で新しい列を作成 30 df["RUD"] = ((((df["CH2"] - 988) + (df["CH4"] - 988) - ((df["CH1"] - 988) + (df["CH3"] - 988))) / 2) / 1544)*100 31 df["ELE"] = ((((df["CH2"] - 988) + (df["CH1"] - 988) - ((df["CH4"] - 988) + (df["CH3"] - 988))) / 2) / 1544)*100 32 df["AIL"] = ((((df["CH2"] - 988) + (df["CH3"] - 988) - ((df["CH1"] - 988) + (df["CH4"] - 988))) / 2) / 1544)*100 33 34 df.to_csv(new_file2,index=False) # 新しい列を追加したcsvを別名で出力、indexをFalseにすることで上書きを防ぐ 35 36 df = pd.read_csv('name3', index_col=0) # 後で確認 37 data = [ 38 go.Scatter(x=df.index, y=df['THL'], name='THL', line=dict(color="#ea553a")), # グラフのチャートの参照するDataFrameと名前を指定 39 ] 40 41 name4 = "試作No" + str(i) + "の記録" 42 name5 = "お試しNo" + str(i) + ".html" 43 layout = go.Layout( # グラフのレイアウトの設定 44 title='name4', 45 xaxis={'title': '時間 [ms]'}, 46 yaxis={'title': '操作量 [%]'}, 47 font={'size': 18}, 48 width=1000, 49 height=600 50 ) 51 52 fig = go.Figure(data=data, layout=layout) 53 54 fig.update_layout(plot_bgcolor="white") 55 fig.update_xaxes(linecolor='black', gridcolor='white',mirror=True) 56 fig.update_yaxes(linecolor='black', gridcolor='white',mirror=True) 57 fig.update_yaxes(range = [0,100]) 58 59 fig.write_html("name5") # 出力するグラフ用ファイルの命名 60 plotly.offline.plot(fig)

試したこと

#テキストファイルの読み込みの行にある、 read_text_file = pd.read_csv (r"name") をread_text_file = pd.read_csv (name)にしたら一応読み込めたのですが、この行以降のコードではエラーが発生してしまいます。

補足情報(FW/ツールのバージョンなど)

ここにより詳細な情報を記載してください。

気になる質問をクリップする

クリップした質問は、後からいつでもMYページで確認できます。

またクリップした質問に回答があった際、通知やメールを受け取ることができます。

バッドをするには、ログインかつ

こちらの条件を満たす必要があります。

PondVillege

2022/11/05 14:59 編集

read_csvはそりゃあもうreadなのですから,読み込むものが無いとエラーになります.なので書き込むことのできるto_csvを使うべきだと考えます
Mattn

2022/11/05 15:55

ありがとうございます。試してみます。
guest

回答1

0

以下のようにしてテキストファイルを読んでいたものを、

python

1 read_text_file = pd.read_csv ("No1.txt")

以下のように変更したのだと想像したのですが、

python

1for i in range(1, 4): 2 name = "No" + str(i) + ".txt" 3 read_text_file = pd.read_csv (r"name") # テキストファイルの読み込み 4 name1 = "No" + str(i) + ",csv" 5 read_text_file.to_csv (r"name1", index=None)

変数名を「""」で囲ってしまうと、変数名を持つ文字列になってしまいます。
せっかく変数として文字列を作ったのですから、ここでは「""」を無くせばOKです。

python

1for i in range(1, 4): 2 name = "No" + str(i) + ".txt" 3 read_text_file = pd.read_csv (name) # テキストファイルの読み込み 4 name1 = "No" + str(i) + ",csv" 5 read_text_file.to_csv (name1, index=None)

ちなみに、多分ですが、「",csv"」はカンマでなく「".csv"」ピリオドの間違えでしょう。

投稿2022/11/05 15:39

TakaiY

総合スコア12611

バッドをするには、ログインかつ

こちらの条件を満たす必要があります。

Mattn

2022/11/05 15:51

返信ありがとうございます。その通りです。もともとはファイル名で直接読み込んでいました。カンマとピリオドの違いについてはご指摘ありがとうございます。修正しました。その他、""を外して挑戦してみたのですが、次はTypeError: unsupported operand type(s) for -: 'str' and 'int'が発生しました。
otn

2022/11/05 16:10

> 'str' and 'int'が発生しました。 どの行ですか?
TakaiY

2022/11/06 03:28

文字列と数値の引き算が発生しそうなのは以下の行以降の数行ですね。 だとすると、データの中に数値じゃないものが混っていたりしませんか? ヘッダ行がデータに含まれてしまっているとか。 df["THL"] = ((((df["CH1"] - 988) + (df["CH3"] - 988) + (df["CH2"] - 988) + (df["CH4"] - 988)) / 4)/ 820)*100
guest

あなたの回答

tips

太字

斜体

打ち消し線

見出し

引用テキストの挿入

コードの挿入

リンクの挿入

リストの挿入

番号リストの挿入

表の挿入

水平線の挿入

プレビュー

まだベストアンサーが選ばれていません

会員登録して回答してみよう

アカウントをお持ちの方は

15分調べてもわからないことは
teratailで質問しよう!

ただいまの回答率
85.53%

質問をまとめることで
思考を整理して素早く解決

テンプレート機能で
簡単に質問をまとめる

質問する

関連した質問