csvファイルをexcelファイルに変換

Question

csvファイル
|列1|列2|列3|
|298|456|987|......
|287|567|973|......
を下記のプログラムでexcelファイルに変換したのですが
excelファイル
|列1|列2|列3|
|'298|'456|'987|......
|'287|'567|'973|......
と数字の前に'が入力されてしまいます。
excelファイル
|列1|列2|列3|
|298|456|987|......
|287|567|973|......
と変換するにはどうしたら良いでしょうか。

import pandas as pd
import csv

with open("./data.csv", "r", encoding="shift_jis", errors="", newline="") as f:
    lst = csv.reader(f)
    df = pd.DataFrame(lst)
df
df.to_excel('excel-data.xlsx', encoding='utf-8')

Answer 1

csv.readerを使うのではなく、od.read_csvを使いましょう。

pandasでcsv/tsvファイル読み込み（read_csv, read_table）をお読みください。

Comments

[yu_ttot]

ご回答ありがとうございます。
csv.readerをpd.read_csvに変更して実行してみたのですが
error: Expected 33 fields in line 4, saw 34
というようなエラーが出てしまいます。

Answer 2

記載していただいた通りに実行すると error: Expected 33 fields in line 4, saw 34 というようなエラーが出てしまいます。

1 行当たりの列数が異なっている CSV データですので、まずは 1 行全てを 1 列として読み込んでから分割します。それから、数値に変換可能なデータを全て変換します。

import pandas as pd

df = pd.read_csv('./data.csv', sep='\n', header=None, prefix='X', encoding="shift-jis")
df = df.X0.str.split(',', expand=True).fillna('')
df.columns = df.iloc[0]
df = df[1:]
df = df.applymap(lambda x: pd.to_numeric(x, errors='ignore', downcast='signed'))
print(df)
df.to_excel('excel-data.xlsx', encoding='utf-8')

Comments

[yu_ttot]

ご回答ありがとうございます。
記載していただいた通りに実行すると
error: Expected 33 fields in line 4, saw 34
というようなエラーが出てしまいます。

[melian]

一行当たりの列数が異なっているのですね。エラーになるかもしれませんが、以下を試してみて下さい。
df = pd.read_csv('./data.csv', sep='\n', header=None, prefix='X', encoding="shift-jis")
df = df.X0.str.split(',', expand=True).fillna('')

[yu_ttot]

ご返信ありがとうございます。
問題なく動きはしたのですが、変換したexcelファイルは質問した形式('200)のような形でセルに入っております。

[melian]

データ中身は全て数値(整数)でしょうか？

[yu_ttot]

ご返信ありがとうございます。
データの中身は一部、少数も入っております。

[melian]

ありがとうございます。回答を修正しましたので試してみて下さい。

[yu_ttot]

問題なく変換することができました。
ありがとうございました。