複数の.txtファイルのデータ読み込みに関して

Question

前提・実現したいこと

pythonのデータ読み込みに関して

.txtのファイルを複数読み込ませたいです。
同じフォルダ内に複数の.txtファイルが入っており、パスを指定して一つのファイルを

data=pd.read_table("パス/ファイル名")
で読み込ませることはできたのですが、複数ファイルはどのようにして読み込ませたら良いのでしょうか？
(初歩的な質問ですみません)

試したこと

①ファイル名が ○○一桁数字_一桁〜二桁数字.txt
data=pd.read_table("パス/○○\d{1}_\d{1,2}")
→うまくいかず...

②コメント頂いた配列方法
path="パス"
all_files=glob.glob(path+"/○○*_*.txt")

li=[]

for フォルダ名 in all_files:
df=pd.read.table(フォルダ名,delimiter=" ")
li.append(df)

frame=pd.concat(li)

→結合する際にエラー？が出てしまいうまくいかず...
No objects to concatenate
出力してみたものの配列には何も入っていないようです...

補足情報（FW/ツールのバージョンなど）

Answer 1

１．フォルダ内のファイル一覧を取得して(glob.glob()など使用）
２．forループ中でpandasでファイルを読み込んで処理
（３．必要に応じて２のDataFrameを連結させて処理）
という方法をよくやります。

Comments

[moshikame]

試したことの②で連結がうまくいかなかったのですが、2.と3.についてもう少し詳しくお聞きすることはできますか？

Answer 2

配列にすると良いようですね・・。

【Pandas】複数のファイルをまとめて読み込む方法

https://ymgsapo.com/2019/07/11/pandas-several-files-read/

Answer 3

基本的に ②の方法で全く問題ないように思えます。
上手くいかないようであれば glob でファイルを上手く見つけられていないのではないでしょうか。

とりあえず、

all_files = glob.glob("path/*.txt")
# (上の path には実際の path 名を入れます）
print(all_files)

にて all_files に対象となるファイルが全て格納されている事を確認ください。

もし余分なファイルが含まれているようであれば、もう少し検索条件を

all_files=glob.glob("path/〇〇*_*.txt")
print(all_files)

のように細かく指定してみても良いと思いますが、問題なければそのままでも構いません。

all_files に対象となるファイルが全て格納されているのであれば、あとは質問にあるようにループで読み込んだデータを配列にいれていき、

l = []
for file in all_files:
    df=pd.read.table(file, delimiter=" ")
    l.append(df)
frame = pd.concat(l)
print(frame)

にて全てのデータを結合できると思います。

Comments

[moshikame]

ご丁寧に説明していただきありがとうございました！

無事解決することができました！！