seleniumで要素取得できない

Question

前提

seleniumを用いて下記のサイトからスクレイピングを行っています。
URL ＞https://www.bleague.jp/schedule/?s=1&tab=1&year=2021&event=2&club=&setuFrom=1
テキストによって要素を探しているのですが、うまくいきません。

実現したいこと

各試合の詳細結果のページに飛ばす、レポートのボタンをseleniumで押したい。

発生している問題・エラーメッセージ

tryを用いているのでException as eで出てきたメッセージですが、

element not interactable

該当のソースコード

import time
from selenium import webdriver
from selenium.webdriver.common.by import By
year = '2019'
browser = webdriver.Chrome('chromedriver.exe')
URL = "https://www.bleague.jp/schedule/?s=&tab=2&year=" + year + "&event=7&setuFrom=1"
browser.get(URL)
time.sleep(2)
capas = []
try:
    to_reports = browser.find_elements(By.XPATH,'//a[text()="レポート"]')
    for to_report in to_reports:
        to_report.click()
        capa = browser.find_element(By.CLASS_NAME,'Attendance').text
　　  capas.append(capa)
except Exception as e :  
    print(e)
print(capas)

試したこと

relで要素取得しようとしましたが
find_elements(By.XPATH,'//a[@rel="noopener"]')
これ以外にもrel="noopener"がたくさんあったので没、
targetも上と同じ理由で没、
classは値が変わってしまうので没となってしまいました。

Answer 1

とりあえず、プログラム完成まではtryを使うのを止めて、エラーメッセージ全文を見ましょう。

aタグをクリックすると、ページ遷移が発生してしまうと思うので、そうすると、遷移前のページで取得したto_reportsの中身はもう使えません。
クリックするのでなく、全部のaタグについてhrefのURLを取得して、順次ページを開くなどの変更が必要です。

Comments

[asasika_R]

丁寧なご回答ありがとうございます。

Answer 2

最初のページでクリック対象の全ての a タグから href を抽出しておいて、それぞれのページから必要なテキストを取得します。

try:
    to_reports = browser.find_elements(By.XPATH,'//a[text()="レポート"]')
    links = [to_report.get_attribute('href') for to_report in to_reports]
    capas = []
    for link in links:
        browser.get(link)
        time.sleep(2)
        capa = browser.find_element(By.CLASS_NAME,'Attendance').text
        capas.append(capa)
except Exception as e :  
    print(e)

print(capas)

Comments

[asasika_R]

丁寧なご回答ありがとうございます。解決いたしました。