質問をすることでしか得られない、回答やアドバイスがある。

15分調べてもわからないことは、質問しよう!

新規登録して質問してみよう
ただいま回答率
85.35%
スクレイピング

スクレイピングとは、公開されているWebサイトからページ内の情報を抽出する技術です。

WSL(Windows Subsystem for Linux)

WSL (Windows Subsystem for Linux) は、Windows10のOS上でLinux向けのバイナリプログラムを実行可能にする機能です。また、WindowsOSのAPIを用いた仕組みを提供しており、Linux側からWindowsOSへのファイルアクセスもできます。

Docker

Dockerは、Docker社が開発したオープンソースのコンテナー管理ソフトウェアの1つです

Python

Pythonは、コードの読みやすさが特徴的なプログラミング言語の1つです。 強い型付け、動的型付けに対応しており、後方互換性がないバージョン2系とバージョン3系が使用されています。 商用製品の開発にも無料で使用でき、OSだけでなく仮想環境にも対応。Unicodeによる文字列操作をサポートしているため、日本語処理も標準で可能です。

selenium

Selenium(セレニウム)は、ブラウザをプログラムで作動させるフレームワークです。この原理を使うことにより、ブラウザのユーザーテストなどを自動化にすることができます。

Q&A

0回答

1172閲覧

WSL2&DOCKER内で,seleniumを使ってスクレイピングをしたい

tonton333

総合スコア19

スクレイピング

スクレイピングとは、公開されているWebサイトからページ内の情報を抽出する技術です。

WSL(Windows Subsystem for Linux)

WSL (Windows Subsystem for Linux) は、Windows10のOS上でLinux向けのバイナリプログラムを実行可能にする機能です。また、WindowsOSのAPIを用いた仕組みを提供しており、Linux側からWindowsOSへのファイルアクセスもできます。

Docker

Dockerは、Docker社が開発したオープンソースのコンテナー管理ソフトウェアの1つです

Python

Pythonは、コードの読みやすさが特徴的なプログラミング言語の1つです。 強い型付け、動的型付けに対応しており、後方互換性がないバージョン2系とバージョン3系が使用されています。 商用製品の開発にも無料で使用でき、OSだけでなく仮想環境にも対応。Unicodeによる文字列操作をサポートしているため、日本語処理も標準で可能です。

selenium

Selenium(セレニウム)は、ブラウザをプログラムで作動させるフレームワークです。この原理を使うことにより、ブラウザのユーザーテストなどを自動化にすることができます。

0グッド

0クリップ

投稿2021/11/20 04:27

こんにちは

現在WSL2内のDockerコンテナから,seleniumを用いたスクレイピングを行いたいのですが
オプションを追記してもchrome not reachableと出て,失敗します
調べたところHitしたオプションは追記してみたのですが,エラーの原因など特定できないでしょうか?

python

1from bs4 import BeautifulSoup 2from selenium import webdriver 3import chromedriver_binary 4 5url = "https://www.google.co.jp/" 6 7 8chrome_options= webdriver.ChromeOptions() 9chrome_options.add_argument('--headless') 10# chrome_options.add_argument('--disable-gpu') 11chrome_options.add_argument('–no-sandbox') 12# chrome_options.add_argument("--disable-dev-shm-usage"); 13chrome_options.add_argument("--remote-debugging-port=9222") 14driver = webdriver.Chrome(options=chrome_options) 15 16driver.get(url) 17html = driver.page_source.encode('utf-8') 18soup = BeautifulSoup(html, 'lxml')

File "/usr/local/lib/python3.8/site-packages/selenium/webdriver/chrome/webdriver.py", line 69, in init

super(WebDriver, self).__init__(DesiredCapabilities.CHROME['browserName'], "goog",

File "/usr/local/lib/python3.8/site-packages/selenium/webdriver/chromium/webdriver.py", line 93, in init
RemoteWebDriver.init(
File "/usr/local/lib/python3.8/site-packages/selenium/webdriver/remote/webdriver.py", line 266, in init
self.start_session(capabilities, browser_profile)
File "/usr/local/lib/python3.8/site-packages/selenium/webdriver/remote/webdriver.py", line 357, in start_session
response = self.execute(Command.NEW_SESSION, parameters)
File "/usr/local/lib/python3.8/site-packages/selenium/webdriver/remote/webdriver.py", line 418, in execute
self.error_handler.check_response(response)
File "/usr/local/lib/python3.8/site-packages/selenium/webdriver/remote/errorhandler.py", line 243, in check_response
raise exception_class(message, screen, stacktrace)
selenium.common.exceptions.WebDriverException: Message: unknown error: Chrome failed to start: exited abnormally.
(chrome not reachable)
(The process started from chrome location /usr/bin/google-chrome is no longer running, so ChromeDriver is assuming that Chrome has crashed.)
Stacktrace:
#0 0x55932d39cee3 <unknown>
#1 0x55932ce6a608 <unknown>
#2 0x55932ce8d8ef <unknown>
#3 0x55932ce8946f <unknown>
#4 0x55932cec3f45 <unknown>
#5 0x55932cebe163 <unknown>
#6 0x55932ce93bfc <unknown>
#7 0x55932ce94c05 <unknown>
#8 0x55932d3cebaa <unknown>
#9 0x55932d3e4651 <unknown>
#10 0x55932d3cfb05 <unknown>
#11 0x55932d3e5a68 <unknown>
#12 0x55932d3c405f <unknown>
#13 0x55932d400818 <unknown>
#14 0x55932d400998 <unknown>
#15 0x55932d41beed <unknown>
#16 0x7f22fa5faea7 <unknown>

気になる質問をクリップする

クリップした質問は、後からいつでもMYページで確認できます。

またクリップした質問に回答があった際、通知やメールを受け取ることができます。

バッドをするには、ログインかつ

こちらの条件を満たす必要があります。

guest

あなたの回答

tips

太字

斜体

打ち消し線

見出し

引用テキストの挿入

コードの挿入

リンクの挿入

リストの挿入

番号リストの挿入

表の挿入

水平線の挿入

プレビュー

まだ回答がついていません

会員登録して回答してみよう

アカウントをお持ちの方は

15分調べてもわからないことは
teratailで質問しよう!

ただいまの回答率
85.35%

質問をまとめることで
思考を整理して素早く解決

テンプレート機能で
簡単に質問をまとめる

質問する

関連した質問