pythonで空白を抜きでフィルターをしたい

Question

Pandas のライブラリを使って、CSVの都市の列に”-”があれば、””空白に変換しています。
空白に変換した後に空白を抜きしてフィルターをかけたいので、dropnaで削除していますが、
なぜか上手く削除されないです。

削除できる方法もしくは、フィルターで空白を抜きで選択する方法ありますでしょうか。

①Excelデータ

No	国	都市
1	アメリカ	カリフォルニア
2	カナダ	-
3	日本	-
４	韓国	ソウル

②実現内容
Excelデータ（フィルター状態）

No	国	都市
1	アメリカ	カリフォルニア
４	韓国	ソウル

Code

import pandas as pd

filename_Test_csv ="TEST.csv"

filename_Test_xlsx ="TEST2.xlsx"

# CSVファイルの読み込み
df = pd.read_csv(filename_Test_csv,encoding="cp932")
#print(df)

#置換
df1 = df.replace('-', '')

#空白削除
df2 =df1.dropna(subset=["都市"])

#csvからExcel形式で出力
df2.to_excel(filename_Test_xlsx,index=False,encoding='utf-8')
print(df2)

よろしくお願い致します。

Comments

[1T2R3M4]

https://ja.stackoverflow.com/questions/83069

以下ご対応ください。
https://teratail.com/help#posted-otherservice

Answer 1

空文字はNaNではないので.dropnaでは除去されません。
かわりに以下のように空文字かの判定で抽出できます。

import pandas as pd
from io import StringIO

s = """No,国,都市
1,アメリカ,カリフォルニア
2,カナダ,-
3,日本,-
4,韓国,ソウル"""
df = pd.read_csv(StringIO(s))
df1 = df.replace('-', '')

df2 = df1[df1['都市'] != '']
print(df2)
#   No     国       都市
#0   1  アメリカ  カリフォルニア
#3   4    韓国      ソウル

Comments

[fideo]

回答ありがとうございます。
上記の方法で行いましたが、ファイルからCSVを読み込みたいですが文字列で読み込むと下記のように
何も表示されないです。

df = pd.read_csv(StringIO(filename_Test_csv))
print(df)

Index: []

ファイルから読み込むにはどのようにすればよろしいでしょうか。
お手数ですが、ご確認をお願い致します。

[can110]

回答コードは検証用です。
「df = pd.read_csv」の部分はご自身のものをそのままお使いください。