Q&A
どういったページのどういった要素の抽出か掲載は可能でしょうか？
selenium の driver.find_element_by_xpath に文字列を直接入力を行うと実行可能なんですが、変数を入れるとエラーが表示されます。
# 正常動作 driver.find_element_by_xpath("//div[@class='hogehoge'][1]").click() # エラー動作1 num = 1 driver.find_element_by_xpath("//div[@class='hogehoge'][" + str(num) + "]").click() # エラー動作2 word = "//div[@class='hogehoge'][1]" driver.find_element_by_xpath(word).click()
回答宜しくお願いします。
[追記1]
変数内の「'」が良くないのかと思い
word = "//div[@class=\'hogehoge\'][1]"
これも試しましたが結果は変わりませんでした。
[追記2]
エラーメッセージ
element click intercepted: Element <div class="hogehoge">...</div> is not clickable at point (415, 547). Other element would receive the click: <div class="hogehoge">...</div>
Pixivというイラスト投稿サイトになります。
該当ページは「イラストを複数枚投稿しているページ」になります。
例で挙げるのでしたら
https://www.pixiv.net/artworks/84888750
になります。
要素は、画像の2枚目以降の「<div class="sc-1mz6e1e-1 QBVJO">」です。
※ この要素を表示するためには【すべてを表示】ボタンを押下しないといけませんが・・・
この「<div class="sc-1mz6e1e-1 QBVJO">」が複数あるためエレメント指定の時に「[1]」や「[2]」といった指定が必要になります。
ここに書かれている外側に問題があるのでしょうね。
あるいは、実際のコードと質問のコードが違うか。
該当文を書き込むと長くなってしまいますので割愛します。
find_element_by_xpath に直接文字列を入力して実行できているので、外側に問題がある感じではないと思います
[すべて見る]押下→全ての画像を表示させ
2枚目以降の画像を1枚ずつ全てクリックしたいという事でしょうか？
はい。
ご指摘の処理を行いたいと思っています。
とりあえずは質問の本筋であるxpathの件については
文字列同士の結合や、文字列と変数の結合というのは特に問題はありません。
お書きの3通りは、どれも同じ動作なので、入れ替えて動かないのであれば、それ以外の部分に原因があることが明白です。
他の部分のコードがおかしいとは考えにくいので、実行の仕方とかですかね。
コード全文をファイルに書いて、「python ファイル名」で実行していますか？
nto さん
質問文の方にも追記しましたが、こちらがエラーメッセージになります。
element click intercepted: Element <div class="sc-1mz6e1e-1 QBVJO">...</div> is not clickable at point (415, 547). Other element would receive the click: <div class="rsntqo-0 jEtDYL">...</div>
otnさん
実行環境はVisualStudioなので「python ファイル名」といった実行ではなくVSの「デバッグ」で実行しています。
度重ね申し訳ございません、もう一つ確認なのですが、目的は画像のクリックでしょうか？
それとも自動で上下にスライドしてくれるボタン要素のクリックが目的でしょうか？
画像クリックが目的です。
回答1件
0
ベストアンサー
pixivはスクレイピングが規約で禁止されているサイトの様ですが
伏せている状態からどこのサイトか聞き出したのはあくまでも私であり、ご回答させていただきますが
規約に違反する行為である為、実際の運用はお控えください。
質問者様の目的の動作である画像のクリックとは少し異なります。
(画像をクリックすると、画像が拡大され連続で他の画像のクリックができなくなる為)
今回は画像のsrc属性を取得するといった形でのサンプルとした形での回答となります。
また、以下のコードは予めログイン処理を済ませているといった前提でのサンプルコードになります。
あくまでもサンプルコードであり、ページ上ではスクロールが行われる事により
画像が表示される仕組みとなっている様で、スクロールしない場合には一部の画像しか抽出は出来ない様でした。
従って間にページ内をスクロールさせる為の処理を用意する必要があるかとは思いますが
運用についてはお控えいただきたい所である為、そこから先についてはご自身でご対応お願いします。
質問の本筋である文字列や変数の値の結合によるxpathの指定については特に問題はありません。
python
1# [すべて見る]をクリック 2display = '//*[@id="root"]/div[2]/div[3]/div/div[1]/main/section/div[1]/div/div[4]/div/div/button' 3driver.find_element_by_xpath(display).click() 4time.sleep(5) # 任意で表示し終わるまで待機 5 6 7# 画像リンクを全て取得する為のxpath 8img_path = '//*[@id="root"]/div[2]/div[3]/div/div[1]/main/section/div[1]/div/figure/div/div/div[2]/a/img' 9images = driver.find_elements_by_xpath(img_path) 10for img in images: 11 print(img.get_attribute("src"))
投稿2020/10/11 09:39
総合スコア1438
ありがとうございます。
最初の命令文の「.click」を取るとエラーが出なかったので、「 <div class="sc-1mz6e1e-1 QBVJO">」へのクリックが問題だったようです。（ただ何故、文字列での指定がOKで変数での指定がNGだったのかは不明のままですが）
なので、imgタグまで降下させてクリックで正常に動作しました。
本当にありがとうございます
あなたの回答
tips
プレビュー
