python: 複数ファイルのパスを順番にリストに格納し、それぞれをpandasデータフレーム型に変換

Question

教えてほしいことが3つあります。

(1) 同じファイルディレクトリに存在している，計5000数のファイルパスを上から順番にリストに格納したい。
(2) そしてその後に、listのインデックスを参照する形で、ファイル一つ一つをpandasデータフレーム
型に変換し,そのリストを作りたい。
(3) 最後に、そのデータフレームを上から、縦に連結したい。

下記に、実現したいイメージを示します。

#(1)でイメージしているアウトプット
['1.txt', '2.txt', '3.txt', '4.txt', '5.txt', '6.txt', '7.txt',.......,'5000.txt']

#(2)でイメージしているコード
dataframe_list = []
for i in range(len(filepath_list)):
     df = pd.read_table(filepath_list[i])
     dataframe_list.append(df)

#(2)でイメージしているアウトプット
['1.txt'のデータフレーム, '2.txt'のデータフレーム, '3.txt'のデータフレーム,.......,'5000.txt'のデータフレーム]

(3)では、(2)で格納したデータフレームを上から順に、concatしたい。

よろしくお願いいたします。

Answer 1

(1) globを使ってください。
参考：globを使ったフォルダ内のファイルネームの取得
globでの格納ファイルの並び順は不定なので、必要であれば、たとえば以下のようにソートしてください。

l = ['1.txt','10.txt','2.txt']
l = sorted(l,key=lambda v: int(v.split('.')[0])) # とりあえずファイル名部分を数値として並び替え

(2) 提示コードでおおむね良いと思います。

(3) 素直にconcatすればできます。具体的には以下の過去質問を参照ください。
pandas 沢山あるデータフレームを１つ１つfor文で読み込んでいき、順にappendしていく

Comments

[shin_shin]

解決しました。ありがとうございます！