selenium 特定のキーワードを含むページ内の要素を全て取得したい

Question

指定のキーワードを含む要素を取得できると便利だと思い、いくつか試行しています。
過去に教わったことを整理すると下記が最も近しいやり方かと思ったのですが、上手くいきませんでした。

#下記で単独キーワードでの要素取得に成功
driver.find_elements_by_xpath("//*[text()[contains(.,'FAX')]]")

#複数キーワードでチャレンジ
box = []
for text in {'FAX', 'TEL'}:
            for text_tag in driver.find_elements_by_xpath("//*[text()[contains(.,'text')]]"):
                box.append(text_tag.text)

変数textが抜けていると指摘を受けたので、format関数で試してみましたが、やはり駄目でした。

box = []
for text in {'Fax', 'TEL'}:
            for text_tag in driver.find_elements_by_xpath("//*[text()[contains(.,'{}').format(text)]]"):
                box.append(text_tag.text)

box = []
for text in {'FAX', 'TEL'}:
    for text_tag in driver.find_elements_by_partial_link_text(text):
        box.append(text_tag.text)

初歩的な質問となるかとは存じますがご教示いただけましたら幸甚です。
何卒よろしくお願い申し上げます。

Answer 1

よくわからないのですが、

<a href="#">hogehoge1</a>
<a href="#">hogehoge2</a>
<a href="#">fugafuga1</a>
<a href="#">hogehoge3</a>

こんな感じのDOMがあって指定したワード(例えばhogehoge)が含まれたものだけ抜き出して、
その文章をまとめてリスト化しboxというリストに入れたいということでしょうか。

print(box) # ['hogehoge1', 'hogehoge2', 'hogehoge3']

でしたらpartial_lin_textを使うのが一番素直です。

box = []
for a_tag in driver.find_elements_by_partial_link_text('hogehoge'):
    box.append(a_tag.text)
print(box) # ['hogehoge1', 'hogehoge2', 'hogehoge3']

これは内包表記を使うと一撃で書くことができて、以下のようになります。

box = [a_tag.text for a_tag in driver.find_elements_by_partial_link_text('hogehoge')]
print(box) # ['hogehoge1', 'hogehoge2', 'hogehoge3']

ちなみにですが、似たようなものにlink_textというものがあります。
partial_link_textは部分一致なのに対して、link_textは完全一致です。

Answer 2

惜しいです。変数 text を入れ込み損ねていて、「textというキーワードを含むページ内の要素」を探してしまっています。

.find_elements_by_xpathの引数を、フォーマット済み文字列リテラル を使って組み立てるといいでしょう。
文字列の頭に f か F を付け、式を{expression}のように書くことで、 Python の式の値を文字列の中に入れ込めます。

Comments

[john_doe_]

ご教示いただきましてありがとうございます。
ご紹介いただいた内容も拝見しましたが、理解がついていきません。。。
事例を見ながら勉強したいと思います。