Python seleniumを使用し、WEB操作

下記のHTMLから、class名が"message"の全てのdivの中にある、■部分のURLをクリックするコードを書きましたが、
動作しません。（特にエラーは出ず、code 0 でExitします・・）
ご指摘のほどよろしくお願いいたします。

（ちなみに、SBI証券様のログイン　-> 口座管理　-> 電子書面交付 -> 閲覧のページです・・）

<pythonコード（一部抜粋）>

・
・
・
message_elements = driver.find_elements_by_class_name("message")
for message_element in message_elements:
    driver.execute_script("URL")

<HTML> ```` <body> <form method="...", id="...", name="...", action="..."> <div class="main-wrapper"> <main> <div class="profile">...</div> <article> <div class="contents article-top"> <div class="view"> <ul class="heading">...</ul> <ul class="message-list"> <li class="message">...<li> <li class="message">...<li> <li class="message">...<li> <li class="message">...<li> <div class="read-state -unread">...</div> <div class="sp-wrapper"> <div class="date">...</div> <div class="type">...</div> <div class="title -unread">...</div> <a href="javascript:void(0);" onclick="hoge("URL")" ■ class="link -no- underbar">あああ</a> <li class="message -read">...<li> <li class="message -read">...<li> <li class="message -read">...<li> ````

行動規範の内容に同意します

回答1件

ベストアンサー

python
1for i in driver.find_elements_by_class_name('message'):
2    div_tag = driver.find_elements_by_class_name('message')[i]
3    a_tag = div_tag.find_element_by_tag_name('a')
4    a_tag.click()
5    sleep(3)
6    driver.back()

とか

python
1pages = [a_tag.get_attribute('onclick') for a_tag in driver.find_elements_by_css_selector('li.message a:first-child')]
2for onclick_js in pages
3    driver.execute_script(onclick_js)
4    sleep(3)
5    driver.back()

とかでいけると思います。最後のdriver.back()は不要かもしれません。

投稿2020/07/26 02:03

shirai

総合スコア1290

koyamashinji

2020/07/26 09:36

ご回答誠に有難うございます。トライしてみましたが、「閲覧」画面で止まってしまい、URLクリックは実行されないようです・・（code 0）。操作対象のHTMLは、https://sbisec.postub.mypot.jp/web/DocumentListInitAction.do というページなのですが、かならず別のタブとして開きます。何か関係があるのでしょうか・・・

shirai

2020/07/26 12:19

driver.switch_to.window(driver.window_handles[1]) を閲覧ページに入った直後に打ってください

koyamashinji

2020/07/30 12:12 編集

回答ありがとうございます。返信遅くなり申し訳ありません。 "driver.switch_to...."でたしかに、対象タブのHTMLを見に行けました。ただ、ご教示いただいた２つ目のコードを実行すると、 selenium.common.exceptions.InvalidArgumentException: Message: invalid argument: 'script' must be a string というエラーが出てしまいます。エラー場所は、driver.execute_script(onclick_js)です。

shirai

2020/07/30 12:37

1つ目のスクリプトではうまく動くでしょうか。もしかしたらonclick_jsがNoneになっているかもしれません。みてもらえればわかると思いますが、「「「messageというclass属性がくっついている全てのliタグ」のそれぞれの配下にある一番最初のaタグ」のonclick属性にベタ書かれているJavascript発火コマンド」をかき集めてpagesというリストにしています。「「messageというclass属性がくっついている全てのliタグ」のそれぞれの配下にある一番最初のaタグ」がクリックしたいものだと思い込んでこのプログラム書きましたが、例外的にonclick属性がついていないaタグがあるのかもしれません。属性がある場合はget_attributeは文字列で値が帰ってきますが、無い場合はget_attributeを打つとNoneが帰ってくる仕様なので stringではなくNoneTypeが帰ってきてそのエラーが起きる可能性があります。 pages = [a_tag.get_attribute('onclick') for a_tag in driver.find_elements_by_css_selector('li.message a:first-child') if a_tag.get_attribute('onclick') is not None] などに変えてみてはいかがでしょうか。

koyamashinji

2020/07/30 13:07

１つめのスクリプトでは、div_tag = driver.find_elements_by_class_name('message')[i]の部分で、 TypeError: list indices must be integers or slices, not WebElementとなってしまいました。 --------- ２つめのスクリプトについては、提示いただいた代替コードで無事動きました・・！ありがとうございます。 HTMLを再確認したところ、下記のようなコードでした。 <li class ="message"> <div class = "read-state -unread"> ::after </div> <div class ="sp-wrapper"> <div class ="date"> ::before "日付" </div> <div class ="title -unread"> <a href = javascript:void(0);" onclick ="クリックしたいURL"> hoge</a> <div class = "buttonPDF1"> <a href = "Javascript:doInline("URL")>fuga</a> </li> 「「messageというclass属性がくっついている全てのliタグ」のそれぞれの配下にある一番最初のaタグ」は、確かにクリックしたい部分（onclickの属性あり）でしたが、２つめのaタグにはonlick属性がついていませんでした。２つめのaタグを拾って、Noneを返したのでしょうか。

shirai

2020/07/30 13:22

１つ目のfor文は for i in range(len(driver.find_elements_by_class_name('message'))): の間違えでしたすみません。 2つめはその可能性もあります。私の書いたCSSセレクタが間違っているのかもしれません。このCSSセレクタはSelenium関係なく世に一般で言われているCSSセレクタと全く同じものです。いくつか検証してもいいかもしれませんね。

koyamashinji

2020/08/01 11:26

非常に勉強になりました。有難うございます。精進いたします.

行動規範の内容に同意します