pandas csvファイルにある改行を解消したい

Question

環境：python3.6,　win10、jupyter notebook

初学者です。既にあるデータフレームの改行記号「\n」を解消したいと考えております。

例えば以下のようなデータフレームに対し、

data1(jupyter上では\nが見えています,エクセルなどで開くと改行されています)

列1	列2	列3
\nあ	い	\n\nう\n\n
え	お	\nか\n
き	\nく	け
こ\n	さ	し

以下のようなコードを実行しても記号が残ったままになります。

#data1は既に処理済みのもの
data1 = data1.replace("\n","")

このようなときはどうしたらよいでしょうか。csvファイル出力の際に改行が解消されていればそれでよいです。
教えて下さると幸いです。よろしくお願いいたします。

Answer 1

regex=Trueを指定することで意図した動作になります。
参考：pandas – some ways to replace part of a string.

import pandas as pd
df = pd.DataFrame( {'c1':['\nあ','い'], 'c2':['\n\nう\n\n', 'え']})
print(df)
df = df.replace( '\n', '', regex=True)
print(df)

Comments

[ak_miyamoto]

先ほどに引き続きありがとうございます。勉強になります！！！

Answer 2

df = df.apply(lambda d: d.str.strip())

でどうでしょうか。

Comments

[ak_miyamoto]

ファイルがきれいになりました。ありがとうございます！

Answer 3

たいぶ昔の投稿のようですが自分のメモ代わりにコメントさせてください…

どの方法が時間的に早いのか確かめたかったのでしらべたところ、当方の環境では以下のとおりでした

import pandas as pd
df = pd.DataFrame(np.array(["あ\n"]*1000*1000).reshape(1000,1000))

#方法1
df = df.replace( '\n', '', regex=True)
#>> 1.04 s ± 8.4 ms per loop (mean ± std. dev. of 7 runs, 1 loop each)

#方法2
for x in df.columns:
    df[x]=df[x].str.replace('\n','')
#>> 869 ms ± 2.35 ms per loop (mean ± std. dev. of 7 runs, 1 loop each)

#方法3
df = df.apply(lambda x:x.str.strip())
#>> 806 ms ± 1.52 ms per loop (mean ± std. dev. of 7 runs, 1 loop each)