csvファイルをみたら一つのセルに改行がされているので1行にしたい。

Question

あるcsvファイルから一行ずつ単語を出そうと思ったのですが、
csvファイルのなかで改行がされているせいでおかしなことになっています。

現状のcsvファイル を1行ずつ読み取るとこうなります。

import csv
with open("現行.csv") as f:
    line = f.readline()
    while (line):
        print(line)
        line = f.readline()

'"あ\n'
'"\n'
'"い\n'
'"\n'
'"う\n'
'"\n'

これだと1行ずつ読み取っても単語として認識してもらえず困っています。

理想のcsvファイル
'"あ"'
'"い"'
'"う"'

としたいです。
どうしたら良いでしょうか。

Comments

[showkit]

「理想のCSVファイル」という言い方をしているのは、現行のCSVファイルを変換したいのですか？前半の文章を読むと現行のファイルのままで読んだ結果が理想の形になるように読みたいようにも思えるのですが・・・。

[wawo]

原稿csvファイルで単語を単語として認識するコードが作れたらそれでも良いのですが、複雑にしたくないので。まず、現行のcsvファイルを理想のcsvファイルにpythonで作り直したいなと思っています。

Answer 1

現行CSVは以下のような形式だと想定した場合の回答です。

"あ\n"\r\n    <--これが１行
"い\n"\r\n
"う\n"\r\n

Excelなどで複数行を含むセルが存在するCSVを作成するとこのような形になります。

pandasを使ってCSVを読み込み\nを空文字に置換します。

import pandas as pd
df = pd.read_csv('test.csv', header=None, encoding='cp932') # とりあえずShift JISと想定
print(df)
"""
     0
0  あ\n
1  い\n
2  う\n
"""

# \nを空文字に置換
df = df.replace('(.*)\n',r'\1',regex=True)
print(df)
"""
   0
0  あ
1  い
2  う
"""

for idx,row in df.iterrows():
    print('[{}]'.format(row[0]))
"""
[あ]
[い]
[う]
"""

Answer 2

(1) str.rstrip() 使う

https://docs.python.org/ja/3.7/library/stdtypes.html?highlight=strip#str.rstrip

with open("test.csv") as f:
    for line in f:
        print(line.rstrip())

(2) そのまま標準ライブラリのcsvを使う

import csv
with open("test.csv") as f:
    reader = csv.reader(f)
    for line in reader:
        print(line)

Comments

[wawo]

ありがとうございます。そちらはやっていて結局改行されてしまうんです...

Answer 3

CSVファイルは " (ダブルクォーテーション) があると、次に " が出現するまでの文字列を1つのセルの情報として扱います。
TEXTファイルの1行を読めばCSVの1行が取得できるわけではありませんし、 "" のようにダブルクォーテーションが続くと " を意味するとか、CSVファイルのルールがあります。
それに従ったコードにする必要があります。

言語はわかりませんが、メジャーな言語であればCSV読み込み用のライブラリや実装例もありますし、CSVファイルの仕様を元に自分で作成してもさほど大した処理でもありません。

CSVファイルの仕様はRFC4180で定義されていますのでご確認ください。
http://www.kasai.fm/wiki/rfc4180jp

以下追記

すみません、Pythonと記載がありました。見逃していました。

import csv

を使えば簡単にできませんか？
あとは実際に試したコードを記載していただくと回答が早くつくかもしれません。

以下追記

このコードでいかがですか？
importしたcsvを使いましょう。

import csv

with open("現行.csv") as f:
        r = csv.reader(f, delimiter=",", doublequote=True, lineterminator="\r\n", quotechar='"', skipinitialspace=True)
        for row in r:
                print(row)

Comments

[wawo]

コードを追加しました。
新しくcsvファイルを作ろうと思ったら、文字ごとに列が区切られてしまっていることに気づき、
書いたコードで一行ずつ出力したところ改行がいたるところに入っていました。

[wawo]

できました。！
最初に\nが入ってしまうことだけ少し気になりますが、問題はなさそうです。ありがとうございます。