質問をすることでしか得られない、回答やアドバイスがある。

15分調べてもわからないことは、質問しよう!

新規登録して質問してみよう
ただいま回答率
87.20%
スクレイピング

スクレイピングとは、公開されているWebサイトからページ内の情報を抽出する技術です。

Python 3.x

Python 3はPythonプログラミング言語の最新バージョンであり、2008年12月3日にリリースされました。

selenium

Selenium(セレニウム)は、ブラウザをプログラムで作動させるフレームワークです。この原理を使うことにより、ブラウザのユーザーテストなどを自動化にすることができます。

受付中

Seleniumで、複数あるクラスの要素を取得しようとするとNoSuchElementExceptionまたは要素数0

circular2016
circular2016

総合スコア15

スクレイピング

スクレイピングとは、公開されているWebサイトからページ内の情報を抽出する技術です。

Python 3.x

Python 3はPythonプログラミング言語の最新バージョンであり、2008年12月3日にリリースされました。

selenium

Selenium(セレニウム)は、ブラウザをプログラムで作動させるフレームワークです。この原理を使うことにより、ブラウザのユーザーテストなどを自動化にすることができます。

1回答

0評価

0クリップ

1042閲覧

投稿2022/01/10 10:22

編集2022/01/12 10:55

前提・実現したいこと

PythonでのWebスクレイピングをしようとしています。

Selenium4を使って、HTML要素を取得したいと思っています。

スクショのページの、コピーボタンのところを取得したいです。

イメージ説明

URL:
リンク内容

イメージ説明

下記の要素を、クラス名で取得したいと思うのですが、どうにもうまくいきません。
<button type="button" class="button KifCopyButton is-small"><!----><span>コピー</span><!----></button>

クラス指定が複数あるのがはまっている点です。

list1 = driver.find_elements(By.CLASS_NAME, 'button')
では目的以外のボタンも取得されてしまうため、クラスは複数指定したいです。

具体的には下記のコードを全て試しましたが、いずれもダメでした。

python3

list1 = driver.find_elements(By.CLASS_NAME, ".button.KifCopyButton.is-small") list1 = driver.find_element(By.CSS_SELECTOR, '.button KifCopyButton is-small') list1 = driver.find_element_by_css_selector('.button.KifCopyButton.is-small')

また、

python3

list1 = driver.find_elements(By.CSS_SELECTOR, '.button.KifCopyButton.is-small')

とすると、例外発生はしないものの、リストの要素数が0でした。

発生している問題・エラーメッセージ

list1 = driver.find_element_by_css_selector('.button.KifCopyButton.is-small') Traceback (most recent call last): File "C:/Users/circu/PycharmProjects/scrapingProject/test.py", line 31, in <module> list1 = driver.find_element_by_css_selector('.button.KifCopyButton.is-small') File "C:\Users\circu\PycharmProjects\scrapingProject\venv\lib\site-packages\selenium\webdriver\remote\webdriver.py", line 808, in find_element_by_css_selector return self.find_element(by=By.CSS_SELECTOR, value=css_selector) File "C:\Users\circu\PycharmProjects\scrapingProject\venv\lib\site-packages\selenium\webdriver\remote\webdriver.py", line 1244, in find_element return self.execute(Command.FIND_ELEMENT, { File "C:\Users\circu\PycharmProjects\scrapingProject\venv\lib\site-packages\selenium\webdriver\remote\webdriver.py", line 424, in execute self.error_handler.check_response(response) File "C:\Users\circu\PycharmProjects\scrapingProject\venv\lib\site-packages\selenium\webdriver\remote\errorhandler.py", line 247, in check_response raise exception_class(message, screen, stacktrace) selenium.common.exceptions.NoSuchElementException: Message: no such element: Unable to locate element: {"method":"css selector","selector":".button.KifCopyButton.is-small"} (Session info: chrome=97.0.4692.71) Stacktrace: Backtrace: Ordinal0 [0x0123FDC3+2555331] Ordinal0 [0x011D77F1+2127857] Ordinal0 [0x010D2E08+1060360] Ordinal0 [0x010FE49E+1238174] Ordinal0 [0x010FE69B+1238683] Ordinal0 [0x01129252+1413714] Ordinal0 [0x01117B54+1342292] Ordinal0 [0x011275FA+1406458] Ordinal0 [0x01117976+1341814] Ordinal0 [0x010F36B6+1193654] Ordinal0 [0x010F4546+1197382] GetHandleVerifier [0x013D9622+1619522] GetHandleVerifier [0x0148882C+2336844] GetHandleVerifier [0x012D23E1+541697] GetHandleVerifier [0x012D1443+537699] Ordinal0 [0x011DD18E+2150798] Ordinal0 [0x011E1518+2168088] Ordinal0 [0x011E1660+2168416] Ordinal0 [0x011EB330+2208560] BaseThreadInitThunk [0x777DFA29+25] RtlGetAppContainerNamedObjectPath [0x77927A9E+286] RtlGetAppContainerNamedObjectPath [0x77927A6E+238]

該当のソースコード

全ソースコード

python3

from selenium import webdriver from selenium.webdriver.common.by import By from time import sleep # import pyperclip import settings driver = webdriver.Chrome(settings.web_driver_dir) driver.get(settings.target_url) search_bar = driver.find_element(By.ID, 'query') search_bar.send_keys(settings.user_name) # list1 = driver.find_elements(By.CLASS_NAME, ".button.KifCopyButton.is-small") # list1 = driver.find_elements(By.CLASS_NAME, 'button') list1 = driver.find_element(By.CSS_SELECTOR, '.button KifCopyButton is-small') # list1 = driver.find_element_by_css_selector('.button.KifCopyButton.is-small') print(list1) for element in list1: print(element.text) # print(element.get_property()) driver.quit()

settings.py

python3

target_url: str = 'https://www.shogi-extend.com/swars/search' user_name = 'makoto_satoh' web_driver_dir = r'C:\Users\ユーザー名\PycharmProjects\scrapingProject\chromedriver.exe'

補足情報(FW/ツールのバージョンなど)

Pycharm
Python3
Selenium4
Chrome97

変数名がテキトーなのはご容赦ください。

よろしくお願い致します。

良い質問の評価を上げる

以下のような質問は評価を上げましょう

  • 質問内容が明確
  • 自分も答えを知りたい
  • 質問者以外のユーザにも役立つ

評価が高い質問は、TOPページの「注目」タブのフィードに表示されやすくなります。

気になる質問をクリップする

クリップした質問は、後からいつでもマイページで確認できます。

またクリップした質問に回答があった際、通知やメールを受け取ることができます。

teratailでは下記のような質問を「具体的に困っていることがない質問」、「サイトポリシーに違反する質問」と定義し、推奨していません。

  • プログラミングに関係のない質問
  • やってほしいことだけを記載した丸投げの質問
  • 問題・課題が含まれていない質問
  • 意図的に内容が抹消された質問
  • 過去に投稿した質問と同じ内容の質問
  • 広告と受け取られるような投稿

評価を下げると、トップページの「アクティブ」「注目」タブのフィードに表示されにくくなります。

melian

2022/01/10 10:35

list1 = driver.find_elements(By.CSS_SELECTOR, '[class="button KifCopyButton is-small"]') とするとどうなりますか?
circular2016

2022/01/10 10:37

ありがとうございます! 要素数0となりました。
circular2016

2022/01/10 10:52

私の方でも動かしてみましたところ、コピーボタンが10個取得できました! 原因が何なのかは不明ですが、ひとまず実現したいこと自体はできました。 ありがとうございます!

まだ回答がついていません

会員登録して回答してみよう

15分調べてもわからないことは
teratailで質問しよう!

ただいまの回答率
87.20%

質問をまとめることで
思考を整理して素早く解決

テンプレート機能で
簡単に質問をまとめる

質問する

関連した質問

同じタグがついた質問を見る

スクレイピング

スクレイピングとは、公開されているWebサイトからページ内の情報を抽出する技術です。

Python 3.x

Python 3はPythonプログラミング言語の最新バージョンであり、2008年12月3日にリリースされました。

selenium

Selenium(セレニウム)は、ブラウザをプログラムで作動させるフレームワークです。この原理を使うことにより、ブラウザのユーザーテストなどを自動化にすることができます。