selenium サイト内にあるリンク先へ順々に遷移させたい

Question

seleniumを利用してサイト内リンクを順々に遷移させることを勉強しています。
今回は下記サイトをテストに利用しました。
https://www.hoge

下記コードを書いてみました。

from selenium import webdriver

driver = webdriver.Chrome()
driver.get('https://www.hoge')

elems = driver.find_elements_by_class_name('UvsinfoBx')
for elem in elems:
    elem_url = elem.find_element_by_tag_name('a').get_attribute('href')
    driver.get(elem_url)
    driver.back()

StaleElementReferenceException: Message: stale element reference: element is not attached to the page document
  (Session info: chrome=78.0.3904.70)

1つ目のリンク先には遷移するのですが、page backせずに止まってしまいます。

初歩的な問題の質問になるかと存じますが、解決方法についてご教示いただけましたら幸甚です。
何卒よろしくお願い申し上げます。

Answer 1

ページ遷移する前の要素のリストを取得してそれをfor文で回していますが、ページ遷移したらその要素は意味がなくなります。seleniumのelementオブジェクトは、「html上の要素をidで紐付けてるけど更新するたびに全く同じ内容でもidが変わるから探せなくなる」というようなイメージです。

次のようにURL部分のみをただの文字列として先にリストにしてしまうのが手っ取り早いでしょう。
backする意味はあまりないかもですが…
あとelemsからaタグを探してるの二度手間なのでcssセレクタ使いましょう。

elem_urls = [elem.get_attribute('href') for elem in driver.find_elements_by_css_selector('.UvsinfoBx a')]
for elem_url in elem_urls:
    #略

追記
xpathで指定するともっと短いです。

elem_urls = driver.find_elements_by_xpath("//*[contain(@class, 'UvsinfoBx')]/a/@href")

Comments

[john_doe_]

リスト化したものをfor文でループさせるのですね。
cssを利用した情報取得は試したことがなかったので大変勉強になりました。
稚拙な質問にもかかわらず、このたびはご親切に大変ありがとうございました。