同じurlで異なる内容のページのhtmlの取得方法がわかりません。

Question

PMDAのサイト(https://www.pmda.go.jp/)では
検索フォーム(https://www.pmda.go.jp/PmdaSearch/kikiSearch/)と検索確認のURLが同じなのですが検索確認のhtmlを解析したいです。
下記のコードでは検索確認のhtmlの解析ができず、検索フォームのhtmlを検出してしまうため、
elem_serch_btn1のクリックに失敗します。
検索確認のhtmlを解析するにはどうしたらようでしょうか・・？
お教示お願いいたします。

調べてみたところphpではfile_get_contents？というものがあることはわかったのですが、(https://teratail.com/questions/16076)pythonでやるとする場合、どのようなものがあるでしょうか？

from selenium import webdriver
from selenium.webdriver.common.by import By
from selenium.webdriver.support.ui import WebDriverWait
from urllib import request
from bs4 import BeautifulSoup
import requests
from urllib.parse import urljoin
import openpyxl as op
import datetime
import time

driver = webdriver.Chrome('C:/chromedriver.exe')
driver.get("https://www.pmda.go.jp/PmdaSearch/kikiSearch/")


elem_search_word = driver.find_element_by_id("txtName")
elem_search_word.send_keys("血液照射装置")
elem_search_btn = driver.find_element_by_name('btnA')
elem_search_btn.click()


time.sleep(5)

elem_serch_btn1 = driver.find_element_by_link_text('//*[@id="ResultList"]/tbody/tr[2]/td[1]/div/a')
elem_serch_btn1.click()

Answer 1

質問はタブを切り替えたいという要件ですよね。
※注意
このソースコードは3タブの遷移に対応していません。

# -*- coding: utf-8 -*-
from selenium import webdriver
from selenium.webdriver.common.by import By
from selenium.webdriver.support.ui import WebDriverWait
from urllib import request
from bs4 import BeautifulSoup
import requests
from urllib.parse import urljoin
import openpyxl as op
import datetime
import time


def switch_window(browser):
    all_handles = set(browser.window_handles)
    switch_to = all_handles.difference([browser.current_window_handle])
    print(switch_to)
    assert len(switch_to) == 1
    browser.switch_to.window(*switch_to)


def main():
    driver = webdriver.Chrome(r'C:\selenium\chromedriver.exe')
    driver.get("https://www.pmda.go.jp/PmdaSearch/kikiSearch/")
    elem_search_word = driver.find_element_by_id("txtName")
    elem_search_word.send_keys("血液照射装置")
    elem_search_btn = driver.find_element_by_name('btnA')

    elem_search_btn.click()
    time.sleep(5)

    print(driver.title)
    switch_window(driver)
    print(driver.title)
    # find_element_by_link_textからfind_element_by_xpathに
    elem_serch_btn1 = driver.find_element_by_xpath('//*[@id="ResultList"]/tbody/tr[2]/td[1]/div/a')
    elem_serch_btn1.click()
    time.sleep(5)


if __name__ == "__main__":
    main()

◇参考情報
python seleniumで新しいタブを開く方法。
Handle multiple window in Python
4. 要素を見つける

Comments

[dkymmmmmt]

正常に動作し、リンク先を開くことができました。
コードや、参考情報まで貼っていただきありがとうございます！

[umyu]

＞dkymmmmmtさんへ
情報検索と検索結果のタブだけだと思ってたのですが、リンク先のURLはもう1個タブができますよね。
change_windowを改造しないとダメかもです。

[dkymmmmmt]

ありがとうございます。
検索結果からのリンク先からはbs4を使ってpdfを吸い出す作業をしようと思っているので、おそらく大丈夫かと思われます。
また、検索結果のHTMLの情報は　change_window(driver)をした時点で取れているのでしょうか？

[dkymmmmmt]

すいません、取れていることが確認できました。
お手数をおかけして申し訳ございません。
助かりました！ありがとうございます！

[umyu]

その目的なら、driver.find_element_by_xpathの前の行にprint(driver.page_source)を入れると取れるます。

[umyu]

解決してよかったですー。