辞書リストを含むcsvのpandasでの読み込み

Question

1,[{'key1':'value1'},{'key2':'value2'}],'a'
2,[{'key1':'value1'},{'key2':'value2'},{'key3':'value3'}],'b'
3,[{'key1':'value1'}],'c'

上記csvを3列としてpandasで読み込みを行いたいです

import pandas as pd

csv = 'test.csv'

data = pd.read_csv(
    csv,
    names=['r1','r2','r3']
    )
print(data)

上記のようにすると、辞書リスト内のカンマを区切り文字として判定してしまうのか、以下のようにずれて出力されてしまいます

                    r1                  r2                  r3
1   [{'key1':'value1'}  {'key2':'value2'}]                 'a'
2   [{'key1':'value1'}   {'key2':'value2'}  {'key3':'value3'}]
3  [{'key1':'value1'}]                 'c'                 NaN

これを以下のように出力するにはどうすれば良いでしょうか？

r1  r2                                                          r3
1   [{'key1':'value1'}  {'key2':'value2'}]                      'a'
2   [{'key1':'value1'}  {'key2':'value2'}  {'key3':'value3'}]   'b'
3   [{'key1':'value1'}]                                         'c'

Answer 1

きれいな方法が思いつかなかったので、参考まで。

import pandas as pd
import csv
csv_path = 'test.csv'
df_dct = {'r1':[], 'r2':[], 'r3':[]}
with open(csv_path) as f:
    reader = csv.reader(f)
    for row in reader:
        df_dct['r1'].append(int(row[0]))
        df_dct['r2'].append(" ".join(row[1:-1]))
        df_dct['r3'].append(row[-1])
data = pd.DataFrame(df_dct).set_index('r1')
print(data)
#                                                    r2   r3
# r1                                                        
# 1               [{'key1':'value1'} {'key2':'value2'}]  'a'
# 2   [{'key1':'value1'} {'key2':'value2'} {'key3':'...  'b'
# 3                                 [{'key1':'value1'}]  'c'

Answer 2

おはようございます。

問題文読ませていただきました。

こんな感じでいかがでしょうか？

import pandas as pd
import csv

# csvについて : https://qiita.com/motoki1990/items/0274d8bcf1a97fe4a869
csv_file = open("./test.csv", "r")
f = csv.reader(csv_file, delimiter=",")

output = []
for row in f:
    count = len(row)
    # joinについて : https://www.headboost.jp/python-strings-into-a-list/
    # listの区切りについて : https://www.javadrive.jp/python/list/index3.html
    output.append([row[0], ' '.join(row[1:count - 1]), row[count - 1]])

print(pd.DataFrame(output, columns=['r1', 'r2', 'r3']))

ご確認のほど、よろしくお願いいたします。????‍♂️

Comments

[pen_ari]

お二人とも回答ありがとうございます
両端を残してリスト再生成するのですね
やりたいことができそうな気がするので助かりました
先に回答頂いた方をベストアンサーとさせていただきます
ありがとうございました。

[退会済みユーザー]

応援してます〜。
またわからないこととかありましたら、気軽にご相談ください〜！！