PythonでcsvファイルをＹａｍｌに変換したい。

Question

python初学者です。

csvファイルを読み込み、Yamlファイルに変換したいとコードを書いています。

csvファイルはこんな形式です。

version:,3
services:,
db:,
container_name:,atcoder-stream-db
image,postgres:12.1
expose,"- ""5432"""
web-backend:,
container_name:,atcoder-stream
  build,
context:,./atcoder-stream
dockerfile:,Dockerfile
volumes:, - ./atcoder-stream・・・・
,- ./atcoder-stream-backend/・・・
,- ./atcoder-stream-backend/・・
ports:,
," - ""8000:8000"""
depends_on:,
, - db
command:,"sh -c ""python /app/src/atcoder-stream-api/manage.py migrate && python"
,
,
web-frontend:,
container_name:,atcoder-stream
build:,
context:,./atcoder-stream
dockerfil:,Dockerfile
volumes:,
,- ./atcoder-stream-frontend:/app
port:,
," - ""3000:3000"""
  command:," sh -c ""cd /app && yarn start"""

こんな感じのファイルです。これを変換すると、
想定しているのが（サンプルです）

version: "3"

services:
  db:
    container_name: atcoder-stream-db
    image: postgres:12.1
    expose:
      - "5432"

  web-backend:
    container_name: atcoder
    build:
      context: ./atcoder
      dockerfile: Dockerfile
    volumes:
      - ./atcoder-stream-backend
      - ./atcoder-stream-backend
      - ./atcoder-stream-backend/
    ports:
      # host:container
      - "8000:8000"
    depends_on:
      - db
    command: sh -c "python /app/src/atcoder-stream-api/manage.py migrate && python /app/src/atcoder-stream-api/manage.py runserver 0.0.0.0:8000"

  web-frontend:
    container_name: atcoder-stream
    build:
      context: ./atcoder-stream
      dockerfile: Dockerfile
    volumes:
      - ./atcoder-stream-frontend:/app
    ports:
      # host:container
      - "3000:3000"
    command: sh -c "cd /app && yarn start"

こんなdocker-compose.ymlのような形式で出力させたいのですが、
テストで以下のようにpythonで記述しました。

import pandas as pd
from pathlib import Path
import yaml

path = Path('keywords.csv')
df = pd.read_csv(path, encoding='cp932')
# print(df)
# path2 = Path('data2.csv')
# df.to_csv(path2, encoding='cp932', index=False)
# print(df)
df = pd.read_csv(path, encoding='cp932',index_col=0)
with open('config.yml','w') as yaml_file:
    yaml.dump(
        df.to_dict(orient='dict'),
        yaml_file,
        sort_keys=False,
    )

出力結果は

'3':
  'services:': .nan
  'db:': .nan
  'container_name:': atcoder-stream・・・
  image: postgres:12.1
  expose: '- "5432"'
  'web-backend:': .nan
  '  build': .nan
  'context:': ./atcoder-stream・・・
  'dockerfile:': Dockerfile
  'volumes:': .nan
  .nan: ' - "3000:3000"'
  'ports:': .nan
  'depends_on:': .nan
  'command:': sh -c "python /app/src/atcoder-stream-api/manage.py migrate && python
  'web-frontend:': .nan
  'build:': .nan
  'dockerfil:': Dockerfile
  'port:': .nan
  '  command:': ' sh -c "cd /app && yarn start"'

versionが表示されなくて３だけが出力されます。
nanが表示されています。

vscodeをよく見ると、cofig.yaml→｛version｝になっています。
何故文字列と認識されないのか分かりません。
keyに対してvalueが空だからnanと出力されたのだと思いますが、これを削除したいです。
ただのエクセルならnamをpandasで削除と考えたのですが、

調べてみたこと
https://stackoverflow.com/questions/46680807/csv-to-yaml-conversion-using-python-script

csvファイルの構造を見直す必要があるのでしょうか？

Answer 1

1行目がheaderでないことを明示し、NaN の確認をskipすれば、想定しているものに近くなると思います。

df = pd.read_csv(path, encoding='cp932',index_col=0, header=None, na_filter=False)

ところで、想定出力の最初が

 version: 3
  'services:': .nan

となっていますが、このようなyamlは問題ではないでしょうか。

https://magazine.rubyist.net/articles/0009/0009-YAML.html#%E3%83%8F%E3%83%83%E3%82%B7%E3%83%A5

また次のように書くことはできません。なぜなら、キー「”A”」に対応する値が「”foo”」なのか「{“a1”=>“bar”,”a2”=>“baz”}」なのか分からないからです。

Comments

[saito5940]

ありがとうございます。

[saito5940]

想定してるyamlコードの記述に誤りがありました。
修正しました。

[saito5940]

csvの記述を見直しました。
想定したyamlコードには近づきましたが、Serviceのｄｂの次のコードがインデントされてなかったりして、
このままだとエラーになります。csvを見直すのか、コードに記述するのか調べています。