csv.DictWriterをつかうべきか、わからずにいます。

Question

当記事を参照

以下のようなデータをcsvファイルに書きこみたいですが、中々思うようにいきません。
最初は以下のようにかいていましたが、どうもうまくいかず。。。ヘッダーは特に必要がないです。ただ、シンプルにリスト内にあるdict型のデータをcsvに書き込みたいと思っています。
こういう場合はcsv.DictWriterをつかうべきなのでしょうか？どうつかうべきでしょうか？

import csv

output_filename = '_anotation_%s.csv'% datetime.now()
with open(output_filename, 'w') as output_file:
    writer = csv.writer(output_file)
...
...

[
{'id':0, 
'transcript': 'あいうえお',
'uri': 'https://xxx/xxxx/'
},
{'id':1, 
'transcript': 'かきくけこ',
'uri': 'https://xxx/xxxx/'
}
,
{'id':2, 
'transcript': 'さしすせそ',
'uri': 'https://xxx/xxxx/'
}
]

Answer 1

pandasに任せてしまうか、dictをjsonに変換してみるのはどうでしょう？

Comments

[sequelanonymous]

ありがとうございます。データ量がもっと多いのでpamdasは避けたいと思っています。jsonにかえるとはどういうことでしょうか？

[mkgrei]

csvにdictを要素として書きたいと勘違いしてました。
失礼しました。

[v["id"], v["transcript"], v["uri"]] for v in data
でdictをほぐすのはいかがでしょう？
python3ならジェネレータを生成するのでメモリはそれほど食わないと想像します。

そしておっしゃるようにcsv.DictWriterも使えると思います。
for v in data:
....writer.writerow(v)
で書き込めるのではないでしょうか。

[sequelanonymous]

> [v["id"], v["transcript"], v["uri"]] for v in data
上記で、できました。ありがとうございます。

追加のご質問で申し訳ないのですが、このデータをin-memoryに書き込んでcsvとしてファイルをgcsやs3に置くなどを次にやってみたいと思っています。なにか手がかりになりそうな情報でもご存知でしたらご教示頂けませんでしょうか？

[sequelanonymous]

ありがとうございます。下記で無事にできました。助かりました。
> writer.writerows([d["idx"], d["uri"], d["transcript"]] for d in data)