HTMLのページによって表示されたりされない場合がある要素をseleniumで抽出したい

Question

huga_xをsleniumで要素を指定し、for文で次のようにseleniumでスクレイピング抽出してますが、要素が表示されるとされない場合があり、抽出の仕方がわからず困っております。

スクレイピング対象のHTMLは次のとおり。

<div class =‘xin’ >

<p class =‘pin’ > huga 
</p>

<p class =‘pin’ > huga_x    ・・・・（？）
</p>

</div> 

次の指定で要素を抽出しています。

for a in bun:
x= a.find_elements_by_css_selector(".pin”)[1].text

が、
（？）の部分が表示されているページであればうまく抽出できるのですが、表示されている場合とない場合があり、ない場合はIndexError: list index out of rangeとなり、プログラムが作動しません。（？）の要素は、ページによって表示順が異なる場合もあるようです。

しかしながら、表示される場合に必ず要素に含まれる「_x」がありますので、これをうまくつかえないかと考えているのですが、良い対応策があればご教示いただければ幸いです。

なお環境はmac,python3です。

Answer 1

find_elements_by_css_selector(".pin”)の中に必ずあるのなら、

for x in a.find_elements_by_css_selector(".pin”):
  if "huga_x" in x.text:
    ～～～

Answer 2

huga_xがリンクテキストで必ず存在するということであれば、try文を使って要素を取得出来るときには取得し、出来ないときには何もしないという風にするのはどうでしょうか。

for a in bun:
    try:
        x= a.driver.find_element_by_partial_link_text('huga_x')
    except:
        pass

Comments

[taboopython]

ありがとうございます！シンプルにうまいきました！huga_xが何個目に出てくるかがわからない、という条件下において、partial_link_textが非常に強力と思いました。
tryとともにチェックしておきます！

追伸
otnさんのご回答と組み合わせてもうまくでき、今後も活用の機会が多かなりそうです。