Pythonのpandasを使って'?'の文字列が含まれている行を削除したい

Question

前提・実現したいこと

pythonのpandasで特定の文字列を含む行を削除するコードが正常に機能しないです。

発生している問題・エラーメッセージ

以下のtxtファイル(かなり量が多いので...で行を省略しています)
...
1056784,3,1,1,1,2,1,2,1,1,2
1057013,8,4,5,1,2,?,7,3,1,4
1059552,1,1,1,1,2,1,3,1,1,2
...
に対して

import numpy as np
import pandas as pd
data = np.loadtxt('./breast-cancer-wisconsin.txt', delimiter=',',dtype='str')
df = pd.DataFrame(data)

を使用してdfにデータを格納後、不正な文字列'?'が存在していることに気づきました。
全部6列目にあったのでこれを消すために

df[~df[6].str.contains('?')]

として文字列'?'を消去しようとしたのですが、以下のエラー文が出てきました。

*** re.error: nothing to repeat at position 0

str.contains()の中身を'1'や'2'で試すと上手くいくのですが'?'の時にエラーが出ます。
分かる方がいらっしゃいましたら教えて頂けると嬉しいです。
ちなみに、もう少し細かいdfの中身は以下の通りです。(25行目まで出力、23行6列に該当の?が存在します。)

補足情報（FW/ツールのバージョンなど）

Anaconda
python3.7.3
MacBook (Retina, 12-inch, Early 2016)

Comments

[meg_]

「文字列'?'を消去」とは「?」を""で置き換えるという意味ですか？　それとも「NaN」にするのでしょうか？

[chutora]

失礼しました、?を含む行の消去です。

Answer 1

numpy.loadtxt -> pandas.DataFrame でなく、pandas.read_csv で直接読み込んだほうがいいと思います。
その際に ? は欠損値を意味するようなので、na_values="?" として欠損値を表す NaN に変換するように指定します。

欠損値が含まれる行を削除したい場合は、その後に dropna をお使いください。

pandas.read_csv — pandas 0.25.0 documentation

pandas.DataFrame.dropna — pandas 0.25.0 documentation

import pandas as pd

df = pd.read_csv("breast-cancer-wisconsin.txt", na_values="?")

# NaN が含まれる行を削除する。
df.dropna(inplace=True)

Comments

[chutora]

ありがとうございます！
read_csvには引数で欠損値を変換する指定が出来るのですね…
実は今日はじめてpandasを使って右も左もわからない状態だったのでとても助かりました！

Answer 2

?はcontainの中では正規表現となりますのでエスケープが必要です。

df[~df[6].str.contains('?')]

Comments

[chutora]

ありがとうございます、動きました！なるほど、正規表現で特殊文字をマッチさせる事に内部的にはなっているのでエスケープが必要になるのですね…