同じ商品の商品説明が複数行に別れているCSVのJSONへの変換

Question

前提・実現したいこと

例ですが以下のようなCSVがあった時に、Pythonを使って特定の列だけを抽出しJSONにする方法はありますでしょうか。
出荷年月日,商品名,説明
20190201,りんご,青森県産
20190201,りんご,価格200円
20190201,りんご,制作農家は田中さん

CSVをJSONにすることはできるのですが、同じ商品名で説明文が複数行に別れているときにこれを1行のJSONデータとして変換する方法がわからなくて困っています。

以下は単純にCSVの内容をJSONにしているだけのコードです。ここから上記のような内容にどう変えて行けば良いのかわからないというところです。
import csv
import json

with open("../testdata/test.csv") as f:
reader = csv.DictReader(f, delimiter=",", quotechar='"')

with open('testData.json', 'w') as f:
    for row in reader:
        json.dump(row, f, ensure_ascii=False ,indent=1 , encoding='utf-8')
        f.write(",")

環境
python3.7.1
anaconda

出力したいJSON

{
"出荷年月日":"20190201",
"商品名":"りんご",
"説明":"青森県産 価格200円 制作農家は田中さん"
}

Comments

[matobaa]

どんなライブラリを使っていますか? あるいは、CSVをJSONにするコードを質問に追記できますか?

[Fantasy_Euphony]

コードはこのような感じです。
ライブラリは標準ライブラリ以外特に使用しておりません。
環境は、python3.7とanacondaです。
import csv
import json

with open("../testdata/test.csv") as f:
reader = csv.DictReader(f, delimiter=",", quotechar='"')

with open('testData.json', 'w') as f:
for row in reader:
json.dump(row, f, ensure_ascii=False ,indent=1 , encoding='utf-8')
f.write(",")

[nomuken]

質問欄のcsvファイルを入力したとき、どのようなjsonファイルを出力したいか追記できますか？

Answer 1

pandas を使い CSVファイル読み込み、データ整形、JSONファイル書き込みまでを行うことができます

import pandas as pd
import io

data = """
出荷年月日,商品名,説明
20190201,りんご,青森県産
20190201,りんご,価格200円
20190201,りんご,制作農家は田中さん
"""

df = pd.read_csv(io.StringIO(data))
df = df.groupby(['出荷年月日','商品名'])['説明'].apply(lambda d:d.values).reset_index()
df.to_json('testData.json', force_ascii=False, orient='records', lines=True)

出力ファイル(testData.json)

{"出荷年月日":20190201,"商品名":"りんご","説明":["青森県産","価格200円","制作農家は田中さん"]}

Answer 2

import pandas as pd
import io

text = """出荷年月日,商品名,説明
20190201,りんご,青森県産
20190201,りんご,価格200円
20190201,りんご,制作農家は田中さん"""

df = pd.read_csv(io.StringIO(text))
g = df.groupby(['出荷年月日','商品名'])

data = {}
for k in g.groups:
    print(type(k))
    data['出荷年月日'] = k[0]
    data['商品名'] = k[1]
    data['説明'] = ' '.join(g.get_group(k)['説明'].values.tolist())

print(data)
#{'出荷年月日': 20190201, '商品名': 'りんご', '説明': '青森県産 価格200円 制作農家は田中さん'}