seleniumを用いたウェブページを開く方法

実現したいこと

・seleniumを使ってページを開く
・上記のページのスクレイピングを行う

前提

現在seleniumを使ってウエブのurlを取得して、ウエブを開いてその解析をする作業を試していますが、
chromeは開くのですがurlを読み込めていないからなのか、
data:,
とだけ表示されて何も始まらない状況です。

chromeはダウンロードしていること、また開けることから、
urlの読込がうまくいっていないのだと思います。

この質問からの続きになります。
"seleniumの環境構築・webdriverの起動"
https://teratail.com/questions/jl8lfxdo8wn0am

以下のサイトおよび動画を参考にコーティングしています。
https://qiita.com/studio_haneya/items/00ef4ad32b85163f95f1
https://www.youtube.com/watch?v=Eu3CojjLQL4

よろしくお願いします。

発生している問題・エラーメッセージ

エラーメッセージ：特になし
→エラーは発生しないが、Chromeが開いてから指定のurlを開けず、
data:,
とだけurl欄に表示されて終了

該当のソースコード

Python
1from selenium import webdriver
2
3
4driver=webdriver.Chrome()#引数は不要とのことよりなし
5driver.implicitly.wait(10)
6driver.get("https://www.library.chiyoda.tokyo.jp/")#url　このurlが読み込めていない？
7
8schedule_el=driver.find_elements_by_class_name("○○○__text")
9print([s.text for s in ○○○])
10

試したこと

（不要とのことだが）引数にchromedriverのパスを渡す
"./chromedriver.exe"
→AttributeError: 'str' object has no attribute 'capabilities'　が発生
絶対参照のパス（C:User/.../file）でないとうまくいかない？

補足情報（FW/ツールのバージョンなど）

windows 11
IDLE Shell 3.11.5

ChromeDriver 114.0.5735.90

melian

2023/10/21 01:36

おそらく、質問を投稿する際の写し間違いかと思いますが、driver.implicitly.wait(10) は driver.implicitly_wait(10) でしょう。 > （不要とのことだが）引数にchromedriverのパスを渡す > "./chromedriver.exe" > →AttributeError: 'str' object has no attribute 'capabilities'　が発生 > 絶対参照のパス（C:User/.../file）でないとうまくいかない？コマンド検索パス以外に置かれている chromedriver を指定する場合は以下の様に記述します。 from selenium.webdriver.chrome.service import Service driver=webdriver.Chrome(service=Service(executable_path='/path/to/chromedriver')) それから、 > schedule_el=driver.find_elements_by_class_name("○○○__text") find_elements_by_* メソッドは Selenium 4.x では既に deprecated(廃止) な状態なので、以下の様に書き直すことになるかと思います。 from selenium.webdriver.common.by import By schedule_el=driver.find_elements(By.CLASS_NAME, "○○○__text")

meg_

2023/10/21 02:20

> ・上記のページのスクレイピングを行う確認ですがそのページはスクレイピングをしても良いサイト(=禁止されていない)でしょうか？

yuuit

2023/10/23 12:34

>>melian様ご丁寧な説明のほどありがとうございます。 driverについて、コメントのように変更したらうまく動作しました。その際、最初に引数ありで行ったら失敗しましたが、引数なしにしたらうまくいきました。原因は不明ですがひとまずは解決として、問題が出たときに改めて考えます。問題が解決できました、ありがとうございます。 >>meg様上記については、特に禁止されてはいませんでした。（前提として、お相手へ迷惑をかけるつもりはなく、サーバーへ負荷をかけないようにwaitにて対策しています）もし対策の不備や禁止の旨の見落としがありましたらご教示いただけると幸いです。

行動規範の内容に同意します

回答1件

自己解決

いただいたコメントによって解決できました。
webdriver.Chromeにて、引数ありでうまくいかず、なしだとうまくいきましたが、
問題は解決できたことと原因が不明だったのでひとまずは解決としました。
改めて、ご返信ありがとうございます。
いいねなどをできなかったので、代わりに内容を以下へ掲載させていただきます。
（本文はコメント参照）

ーーーーーーーーーーーーーーーーーーーーーーーーーーーーーーーーーーーーーーーーーーーー

おそらく、質問を投稿する際の写し間違いかと思いますが、driver.implicitly.wait(10) は driver.implicitly_wait(10) でしょう。

（不要とのことだが）引数にchromedriverのパスを渡す
"./chromedriver.exe"
→AttributeError: 'str' object has no attribute 'capabilities'　が発生
絶対参照のパス（C:User/.../file）でないとうまくいかない？

コマンド検索パス以外に置かれている chromedriver を指定する場合は以下の様に記述します。

from selenium.webdriver.chrome.service import Service

driver=webdriver.Chrome(service=Service(executable_path='/path/to/chromedriver'))

それから、