(Python) 複数のcsvファイル内の指定列のみを結合する方法他

Question

実施したいこと
フォルダ内に存在する複数のcsvファイルの任意の列を抽出して結合したいと考えています。
コードの流れは以下の通りかと考えています。
ここで列1だけを0列目に配置するやりかたがわかりません。

[作成したい結合後のcsvファイルの中身]

列1	sampleA	sampleB	sampleC
1	1000	1000	1000
2	2000	2000	2000
3	3000	3000	3000

現在の状況
下のようなcsvが現在出力されています。

sampleA	sampleB	sampleC
1000	1000	1000
2000	2000	2000
3000	3000	3000

補足情報
[フォルダの構成]
data
-sampleA.csv
-sampleB.csv
-sampleC.csv

※dataフォルダはDesktop直下にあります

[各csvファイルの中身]

列1	列2
1	1000
2	2000
3	3000

[現在のコード]

import pandas as pd
import os
import glob

#dataフォルダ内の.csvファイル一覧を取得
data_path    = os.path.abspath(r"C:/Users/Username/Desktop/data")
csvfile_path = glob.glob(data_path + '/*.csv')

#csvファイルの中身を追加していくリストを用意
total_list = []
df         = []

#読み込むファイルのリストを走査
for filename in csvfile_path:
    csvfile      = pd.read_csv(filename)
    csvfile_drop = csvfile.drop(csvfile.columns[[0, 1]], axis='columns')
    csvfile_drop = csvfile_drop.rename(columns={'列2':filename})
    total_list.append(csvfile_drop)
    df = pd.concat(total_list, axis=1)

#total.csvとして出力
df.to_csv("total.csv")

よろしくお願いします。

Comments

[meg_]

> 途中でつまづき中々先に進めない状況です。
質問のコードのどこでつまづいているのでしょうか？

[sssan]

説明不足で申し訳ございません。
まず、上記コードを実行すると
ValueError: No objects to concatenate
というエラーが出ます。
宜しくお願い致します。

[bsdfan]

csvfilelist が空になっていませんか？
os.path.dirname を使っているのでDesktopにある*.csvを探していることになっています。

[sssan]

os.path.dirnameでdataフォルダのpath名を取得し、
csvfilelist = glob.glob(csvfolder_path + '/*.csv')でdataフォルダ直下のcsvファイルを取得していることになっていませんでしょうか？
宜しくお願い致します。

[bsdfan]

それぞれの変数をprintして確認してみてください。
os.path.dirnameは、引数のファイル(ディレクトリ)の親ディレクトリを返します。
今回の場合は、dataフォルダがあるフォルダ=Desktopを取り出していることになります。
https://docs.python.org/ja/3/library/os.path.html#os.path.dirname

[meg_]

> まず、上記コードを実行すると
ValueError: No objects to concatenate
というエラーが出ます。

どこでエラーが発生しているかも含め質問に追記しましょう。

[sssan]

→bsdfan様、meg様
現在の状況を更新しました。お手数をおかけしますが宜しくお願い致します。

→bsdfan様
仰る通りdataフォルダを抽出していました。修正したところ無事csvファイルを読み込むことができました。
→meg様
エラーの詳細を記述しておらず申し訳ありませんでした。ValueError: No objects to concatenateについてはpathを変更することで解決できました。

[meg_]

下記は不要では？
csvfile_name = os.path.basename(csvfile_name)

[sssan]

→meg様
仰る通りos.path.basenameは不要で、for filename in csvfile_path:のfilenameを使用すれば大丈夫でした。
結合後に列1だけを0列目に配置するやりかたはわかりますでしょうか？
お手数をおかけしますが宜しくお願い致します。

Answer 1

一列目のデータによるのですが、一列目をインデックスにしてすべてを結合してから、リセットするのはどうでしょうか。

total_list = []

# 読み込むファイルのリストを走査
for filename in csvfiles:
    csvfile = pd.read_csv(filename, index_col=0)
    total_list.append(csvfile.rename(columns={'列2':filename}))

# ループが終わってから結合
df = pd.concat(total_list, axis=1).reset_index()

#total.csvとして出力
print(df.head())
df.to_csv("total.csv")

Comments

[sssan]

ご回答いただきありがとうございます。
無事作成したいものができました。
お手数をおかけしました。