Google Colaboratoryにて、JavaScriptで生成されるウェブサイトをスクレイピングしようとしております(seleniumを使用)が、
"WebDriverException: Message: Service chromedriver unexpectedly exited. Status code was: -6"というエラーが出現して、現状解決できていません。
driver = webdriver.Chrome('chromedriver',options=options)
この行でエラーが出ていると思われます。
Chromedriverのバージョンをアップデートするなどやってみましたが、現状エラー解消していません。
考えられる原因はありましたらご教授いただきたく思っております。よろしくお願いいたします。
実行したコード↓
!pip install selenium !pip install chromedriver_binary !pip install chromium-chromedriver !cp /usr/lib/chromium-browser/chromedriver /usr/bin
from selenium import webdriver from selenium.webdriver.chrome.options import Options import chromedriver_binary from bs4 import BeautifulSoup options = webdriver.ChromeOptions() options.add_argument('--headless') options.add_argument('--no-sandbox') options.add_argument('--disable-dev-shm-usage') driver = webdriver.Chrome('chromedriver',options=options) driver.get("https://取得したいサイトのアドレス") html = driver.page_source.encode('utf-8') soup = BeautifulSoup(html, "html.parser") print(soup)
返ってきたエラーコード↓
WebDriverException Traceback (most recent call last) <ipython-input-4-0fef58bd7308> in <module>() 8 options.add_argument('--no-sandbox') 9 options.add_argument('--disable-dev-shm-usage') ---> 10 driver = webdriver.Chrome('chromedriver',options=options) 11 driver.get("https://取得したいサイトのアドレス") 12 html = driver.page_source.encode('utf-8') 3 frames /usr/local/lib/python3.7/dist-packages/selenium/webdriver/chrome/webdriver.py in __init__(self, executable_path, port, options, service_args, desired_capabilities, service_log_path, chrome_options, service, keep_alive) 70 port, options, 71 service_args, desired_capabilities, ---> 72 service_log_path, service, keep_alive) /usr/local/lib/python3.7/dist-packages/selenium/webdriver/chromium/webdriver.py in __init__(self, browser_name, vendor_prefix, port, options, service_args, desired_capabilities, service_log_path, service, keep_alive) 88 89 self.service = service ---> 90 self.service.start() 91 92 try: /usr/local/lib/python3.7/dist-packages/selenium/webdriver/common/service.py in start(self) 99 count = 0 100 while True: --> 101 self.assert_process_still_running() 102 if self.is_connectable(): 103 break /usr/local/lib/python3.7/dist-packages/selenium/webdriver/common/service.py in assert_process_still_running(self) 113 raise WebDriverException( 114 'Service %s unexpectedly exited. Status code was: %s' --> 115 % (self.path, return_code) 116 ) 117 WebDriverException: Message: Service chromedriver unexpectedly exited. Status code was: -6
あなたの回答
tips
プレビュー