質問をすることでしか得られない、回答やアドバイスがある。

15分調べてもわからないことは、質問しよう!

新規登録して質問してみよう
ただいま回答率
85.35%
スクレイピング

スクレイピングとは、公開されているWebサイトからページ内の情報を抽出する技術です。

selenium

Selenium(セレニウム)は、ブラウザをプログラムで作動させるフレームワークです。この原理を使うことにより、ブラウザのユーザーテストなどを自動化にすることができます。

Q&A

解決済

1回答

610閲覧

seleniumでループをエラー無くおわりにしたい。

zumo1224

総合スコア3

スクレイピング

スクレイピングとは、公開されているWebサイトからページ内の情報を抽出する技術です。

selenium

Selenium(セレニウム)は、ブラウザをプログラムで作動させるフレームワークです。この原理を使うことにより、ブラウザのユーザーテストなどを自動化にすることができます。

0グッド

0クリップ

投稿2021/08/13 05:21

前提・実現したいこと

seleniumを使用してスクレイピングをしようと考えています。
xpathの一部を変数にしてループさせてテキストを表示しようと考えています。

発生している問題・エラーメッセージ

ループで回して取得しようとするのですが、取得する値の数がその時々で変わるので
何回ループを回せばよいのかわかりません。
ですので、該当するxpathが存在しなかった場合、ループを終わりにしたいのですが、うまくいかず
エラーが起きてしまいます。(ちなみに取得する値は大体30から50なので自分が書いたコードだと間違いなく途中で存在しないxpathが生まれる)
どのようにすればエラー無く終わりにできるか教えていただけるとありがたいです。

**エラー内容** --------------------------------------------------------------------------- NoSuchElementException Traceback (most recent call last) <ipython-input-199-f0a1904f1817> in <module> 1 #//*[@id="__next"]/div/div[4]/div/ul/div[2]/a/div/div[2]/div/ul[1]/li 2 for i in range(1, 100): ----> 3 elem_username = browser.find_element_by_xpath(f'//*[@id="__next"]/div/div[4]/div/ul/div[{i}]/a/div/div[2]/div/ul[1]/li') 4 if elem_username is False: 5 break ~\anaconda3\lib\site-packages\selenium\webdriver\remote\webdriver.py in find_element_by_xpath(self, xpath) 392 element = driver.find_element_by_xpath('//div/td[1]') 393 """ --> 394 return self.find_element(by=By.XPATH, value=xpath) 395 396 def find_elements_by_xpath(self, xpath): ~\anaconda3\lib\site-packages\selenium\webdriver\remote\webdriver.py in find_element(self, by, value) 974 by = By.CSS_SELECTOR 975 value = '[name="%s"]' % value --> 976 return self.execute(Command.FIND_ELEMENT, { 977 'using': by, 978 'value': value})['value'] ~\anaconda3\lib\site-packages\selenium\webdriver\remote\webdriver.py in execute(self, driver_command, params) 319 response = self.command_executor.execute(driver_command, params) 320 if response: --> 321 self.error_handler.check_response(response) 322 response['value'] = self._unwrap_value( 323 response.get('value', None)) ~\anaconda3\lib\site-packages\selenium\webdriver\remote\errorhandler.py in check_response(self, response) 240 alert_text = value['alert'].get('text') 241 raise exception_class(message, screen, stacktrace, alert_text) --> 242 raise exception_class(message, screen, stacktrace) 243 244 def _value_or_default(self, obj, key, default): NoSuchElementException: Message: no such element: Unable to locate element: {"method":"xpath","selector":"//*[@id="__next"]/div/div[4]/div/ul/div[20]/a/div/div[2]/div/ul[1]/li"} (Session info: chrome=92.0.4515.131)

該当のソースコード

python

1for i in range(1, 100): 2 elem_username = browser.find_element_by_xpath(f'//*[@id="__next"]/div/div[4]/div/ul/div[{i}]/a/div/div[2]/div/ul[1]/li') 3 if elem_username is None: 4 break 5 else: 6 username = elem_username.text 7 print(username)

試したこと

表記の仕方があっているかはわからないが、if elem_username is None: のようになかったら
breakでループを抜けようとした。

補足情報(FW/ツールのバージョンなど)

プログラム初心者で初歩的なことかもしれませんがよろしくお願いします。

気になる質問をクリップする

クリップした質問は、後からいつでもMYページで確認できます。

またクリップした質問に回答があった際、通知やメールを受け取ることができます。

バッドをするには、ログインかつ

こちらの条件を満たす必要があります。

回答1

0

ベストアンサー

find_elements_by_xpath()を使用してはどうでしょうか?

投稿2021/08/13 05:59

meg_

総合スコア10760

バッドをするには、ログインかつ

こちらの条件を満たす必要があります。

あなたの回答

tips

太字

斜体

打ち消し線

見出し

引用テキストの挿入

コードの挿入

リンクの挿入

リストの挿入

番号リストの挿入

表の挿入

水平線の挿入

プレビュー

15分調べてもわからないことは
teratailで質問しよう!

ただいまの回答率
85.35%

質問をまとめることで
思考を整理して素早く解決

テンプレート機能で
簡単に質問をまとめる

質問する

関連した質問