seleniumで要素の数が変動する場合

Question

前提・実現したいこと

こんにちは、プログラミング3日目の初心者です。Python/selenium/chromeでウェブクロールをしたいと考えており、xpath等で要素を指定してページを行き来することにもなれてきました。

今クローリングしたいページは、毎日更新されるため、指定したい要素が1つ〜3つで変動します。例えば、開きたいリンク（要素）が3つある日は、3つの要素をしていしたコードで実行すれば問題ありませんが、リンクが1つしかない場合だと、そこでエラーが起こりクローリングが止まってしまいます。

このように、要素が指定できない場合(no such element)、それをスキップして次の段階に行く方法はありますか？
それとも、要素の数をカウントして、条件分岐でリンクをクリックするなどの回避が必要でしょうか。

該当のソースコード

# info01~03をクリック
driver_info01 = driver.find_element_by_xpath('/html/body/~~~~a[1]')
time.sleep(2)

# 要素を新しいタブで開く
actions = ActionChains(driver)
actions.key_down(Keys.COMMAND)
actions.click(driver_info01)
actions.perform()
time.sleep(6)
print("info01をクリックした")

# 今開いたタブを閉じる
handle_array = driver.window_handles
driver.switch_to.window(handle_array[-1])
driver.close()

# info02 以下同文です
driver_info02 = driver.find_element_by_xpath('/html/body/div[5]/div[4]/div[5]/div[2]/div/div[1]/div[3]/ul[1]/a[2]')
time.sleep(2)
actions = ActionChains(driver)
actions.key_down(Keys.COMMAND)
actions.click(driver_info02)
actions.perform()
time.sleep(6)
handle_array = driver.window_handles
driver.switch_to.window(handle_array[-1])
driver.close()

Comments

[hentaiman]

find_elementsが使えるかどうかで適切な回答が変わってきます

Answer 1

要素の数をカウントして、条件分岐でリンクをクリックするなどの回避が必要でしょうか。

要素をリストで取得して、ループでリストを処理するのが普通です。

Answer 2

ごく一般的な手法として、取得しようとした要素が存在しない場合には例外が発生しますので、その例外を捕捉してやればよいです。
概念コードを以下に示します。

for e in elements:
    try:
        driver.get(e)
    except 要素がない(no such element)Error:
        pass # 何もしない
    # 要素があった場合の処理
    ：