トップに関する質問 jupyter labでChromedriverのPATHが通らない

編集履歴

質問編集履歴

より見やすく

2021/02/24 10:27

投稿

nogish

スコア20

test CHANGED Viewed

File without changes

test CHANGED Viewed

@@ -364,7 +364,7 @@
-**結果**：OSError: [Errno 8] Exec format error: '/workspace/chromedriver'
+→**結果**：OSError: [Errno 8] Exec format error: '/workspace/chromedriver'
 が返ってきました。
@@ -386,7 +386,7 @@
-**結果**：
+→**結果**：
 WebDriverException: Message: Service chromedriver unexpectedly exited. Status code was: 127
@@ -406,7 +406,7 @@
-**結果**：WebDriverException: Message: 'chromedriver' executable needs to be in PATH.
+→**結果**：WebDriverException: Message: 'chromedriver' executable needs to be in PATH.
@@ -422,7 +422,7 @@
-**結果：**
+→**結果：**
 ERROR:

新たなエラーメッセージの追加、非常に読みにくくなっていたので修正

2021/02/24 10:27

投稿

nogish

スコア20

test CHANGED Viewed

File without changes

test CHANGED Viewed

@@ -22,9 +22,93 @@
 ### 発生している問題・エラーメッセージ
-追記↓（③の新しく発生したエラーです）
-```Status code:127
+追記↓
+```5
+###⑤のエラーメッセージ###
+OSError                                   Traceback (most recent call last)
+<ipython-input-10-89af866da0ea> in <module>
+      1 # Mac
+      2 #browser = webdriver.Chrome()
+----> 3 browser = webdriver.Chrome(executable_path='/workspace/chromedriver')
+      4 # Chromedriverが見つかるまでの待ち時間を設定
+      5 #browser.implicitly_wait(3)
+~/anaconda3/lib/python3.7/site-packages/selenium/webdriver/chrome/webdriver.py in __init__(self, executable_path, port, options, service_args, desired_capabilities, service_log_path, chrome_options, keep_alive)
+     71             service_args=service_args,
+     72             log_path=service_log_path)
+---> 73         self.service.start()
+     74
+     75         try:
+~/anaconda3/lib/python3.7/site-packages/selenium/webdriver/common/service.py in start(self)
+     74                                             stdout=self.log_file,
+     75                                             stderr=self.log_file,
+---> 76                                             stdin=PIPE)
+     77         except TypeError:
+     78             raise
+~/anaconda3/lib/python3.7/subprocess.py in __init__(self, args, bufsize, executable, stdin, stdout, stderr, preexec_fn, close_fds, shell, cwd, env, universal_newlines, startupinfo, creationflags, restore_signals, start_new_session, pass_fds, encoding, errors, text)
+    773                                 c2pread, c2pwrite,
+    774                                 errread, errwrite,
+--> 775                                 restore_signals, start_new_session)
+    776         except:
+    777             # Cleanup if the child failed starting.
+~/anaconda3/lib/python3.7/subprocess.py in _execute_child(self, args, executable, preexec_fn, close_fds, pass_fds, cwd, env, startupinfo, creationflags, shell, p2cread, p2cwrite, c2pread, c2pwrite, errread, errwrite, restore_signals, start_new_session)
+   1520                         if errno_num == errno.ENOENT:
+   1521                             err_msg += ': ' + repr(err_filename)
+-> 1522                     raise child_exception_type(errno_num, err_msg, err_filename)
+   1523                 raise child_exception_type(err_msg)
+   1524
+OSError: [Errno 8] Exec format error: '/workspace/chromedriver'
+```
+```3
+###③,④のエラーメッセージ###
 WebDriverException                        Traceback (most recent call last)
@@ -82,13 +166,11 @@
 WebDriverException: Message: Service chromedriver unexpectedly exited. Status code was: 127
-```
 ```
+```1
----------------------------------------------------------------------------
+###当初〜②のエラーメッセージ###
 FileNotFoundError                         Traceback (most recent call last)
@@ -202,7 +284,9 @@
 ```
+↓以下、Dockerfileの内容です
-```Docker file
+```Dockerfile
 FROM ubuntu:latest
@@ -270,7 +354,23 @@
 追記
+⑤ **executable_pathをマウントしたDocker側のディレクトリで、指定できていないようだったので、**
+- 一度homebrewでchromedriverをアンインストールして、HPからダウンロードし直し、
+- デスクトップでマウントしたディレクトリに、chromedriverを移し、
+- executable='/workspace/chromedriver'と指定したところ、
+**結果**：OSError: [Errno 8] Exec format error: '/workspace/chromedriver'
+が返ってきました。
-④**https://watlab-blog.com/2019/08/10/chromedriver-path/を参考に、**
+④ **https://watlab-blog.com/2019/08/10/chromedriver-path/を参考に、**
 import chromedriver_binary
@@ -278,7 +378,7 @@
-③**chromedriverが起動できていないからでは？と思い、
+③ **chromedriverが起動できていないからでは？と思い、
 ターミナルで、chromedriverと入力**
@@ -286,15 +386,31 @@
+**結果**：
 WebDriverException: Message: Service chromedriver unexpectedly exited. Status code was: 127
 という新しいエラーメッセージが返ってきました、、
+② **Dockerfileは関係ないか？と思い、一旦Dockerfileの追記は削除しました。**
+・chromedriverをreinstall直したり、
+・chromeのアップデートとchromedriverをバージョンが合うものでインストールし直したり、
+・chromedriverがひらけなかったので、macのシステム環境設定から開けるようにしたり、
+色々試行→
+**結果**：WebDriverException: Message: 'chromedriver' executable needs to be in PATH.
-①**Dockerを使ったコンテナで、これまでもJupyter Labで行ってきたため、Dockerfileにchromedriverのインストールなどができるように以下のサイトのものをコピペして追加ました。**
+① **Dockerを使ったコンテナで、これまでもJupyter Labで行ってきたため、Dockerfileにchromedriverのインストールなどができるように以下のサイトのものをコピペして追加ました。**
 https://gist.github.com/varyonic/dea40abcf3dd891d204ef235c6e8dd79
@@ -306,6 +422,8 @@
+**結果：**
 ERROR:
         Can't find a suitable configuration file in this directory or any
@@ -322,24 +440,6 @@
-②**Dockerfileは関係ないか？と思い、一旦Dockerfileの追記は削除しました。**
-・chromedriverをreinstall直したり、
-・chromeのアップデートとchromedriverをバージョンが合うものでインストールし直したり、
-・chromedriverがひらけなかったので、macのシステム環境設定から開けるようにしたり、
-色々試しましたが、全て結局同じエラーメッセージが出ます。
-お手数おかけしますが、何卒ご回答よろしくお願いします。
 ### 補足
 jupyter labでのマウント？設定はこのようになっています。

Dockerとデスクトップのマウントについて

2021/02/24 10:25

投稿

nogish

スコア20

test CHANGED Viewed

File without changes

test CHANGED Viewed

@@ -337,3 +337,23 @@
 お手数おかけしますが、何卒ご回答よろしくお願いします。
+### 補足
+jupyter labでのマウント？設定はこのようになっています。
+スクレイピング.ipynbファイルが問題のエラーコードが出ているファイルですが、自動化大全ディレクトリ内のものです。
+![jupyter labでのマウント？設定](e2c1f587783a1f3b83f706664c2a99f4.png)
+Dockerとデスクトップのマウントは、
+・デスクトップ：/User/user/Desktop/kinocode
+・Docker：/workspace
+となっているようです。
+（初心者なので、認識間違っている可能性があればぜひご教示ください。）

タグの変更

2021/02/24 09:19

投稿

nogish

スコア20

test CHANGED Viewed

File without changes

test CHANGED Viewed

File without changes

新たなエラーメッセージの追加

2021/02/24 08:32

投稿

nogish

スコア20

test CHANGED Viewed

File without changes

test CHANGED Viewed

@@ -22,6 +22,68 @@
 ### 発生している問題・エラーメッセージ
+追記↓（③の新しく発生したエラーです）
+```Status code:127
+WebDriverException                        Traceback (most recent call last)
+<ipython-input-33-73642a135d06> in <module>
+      1 # Mac
+----> 2 browser = webdriver.Chrome()
+      3 # Chromedriverが見つかるまでの待ち時間を設定
+~/anaconda3/lib/python3.7/site-packages/selenium/webdriver/chrome/webdriver.py in __init__(self, executable_path, port, options, service_args, desired_capabilities, service_log_path, chrome_options, keep_alive)
+     71             service_args=service_args,
+     72             log_path=service_log_path)
+---> 73         self.service.start()
+     74
+     75         try:
+~/anaconda3/lib/python3.7/site-packages/selenium/webdriver/common/service.py in start(self)
+     96         count = 0
+     97         while True:
+---> 98             self.assert_process_still_running()
+     99             if self.is_connectable():
+    100                 break
+~/anaconda3/lib/python3.7/site-packages/selenium/webdriver/common/service.py in assert_process_still_running(self)
+    109             raise WebDriverException(
+    110                 'Service %s unexpectedly exited. Status code was: %s'
+--> 111                 % (self.path, return_code)
+    112             )
+    113
+WebDriverException: Message: Service chromedriver unexpectedly exited. Status code was: 127
+```
 ```

import chromedriver_binaryの追加

2021/02/24 08:30

投稿

nogish

スコア20

test CHANGED Viewed

File without changes

test CHANGED Viewed

@@ -128,6 +128,8 @@
 from selenium import webdriver
+import chromedriver_binary # ←追加
 import time
 import pandas as pd
@@ -206,11 +208,19 @@
 追記
+④**https://watlab-blog.com/2019/08/10/chromedriver-path/を参考に、**
+import chromedriver_binary
+を追加してみましたが、③と同様に、エラーコード127が返ってきました、、
 ③**chromedriverが起動できていないからでは？と思い、
-ターミナルで、chromedriverと入力**し、
+ターミナルで、chromedriverと入力**
-起動できたのですが、今度は、
+し、起動できたのですが、今度は、
@@ -222,7 +232,7 @@
-①Dockerを使ったコンテナで、これまでもJupyter Labで行ってきたため、Dockerfileにchromedriverのインストールなどができるように以下のサイトのものをコピペして追加ました。
+①**Dockerを使ったコンテナで、これまでもJupyter Labで行ってきたため、Dockerfileにchromedriverのインストールなどができるように以下のサイトのものをコピペして追加ました。**
 https://gist.github.com/varyonic/dea40abcf3dd891d204ef235c6e8dd79
@@ -250,7 +260,7 @@
-②Dockerfileは関係ないか？と思い、一旦Dockerfileの追記は削除しました。
+②**Dockerfileは関係ないか？と思い、一旦Dockerfileの追記は削除しました。**
 ・chromedriverをreinstall直したり、

Dockerfileの追加

2021/02/24 08:24

投稿

nogish

スコア20

test CHANGED Viewed

	@@ -1 +1 @@
1	- jupyter labでchromedriverのPATHが通らない
1	+ jupyter labでChromedriverのPATHが通らない

test CHANGED Viewed

@@ -8,15 +8,15 @@
-**そこでchromedriverのPATHが通らず？
+**そこでchromedriverのPATHが通らず
-browser.implicitly_wait(3)
+webdriver.Chrome()
 が実行できません。**
-Macを使っています。
+＊Macを使っています。
@@ -138,6 +138,68 @@
 ```
+```Docker file
+FROM ubuntu:latest
+RUN apt-get update && apt-get install -y sudo wget vim curl gawk make gcc
+RUN wget https://repo.continuum.io/archive/Anaconda3-2019.03-Linux-x86_64.sh && \
+    sh Anaconda3-2019.03-Linux-x86_64.sh -b  && \
+    rm -f Anaconda3-2019.03-Linux-x86_64.sh && \
+    sudo curl -sL https://deb.nodesource.com/setup_10.x | sudo bash -  && \
+    sudo apt-get install -y nodejs
+ENV PATH $PATH:/root/anaconda3/bin
+RUN pip install --upgrade pip
+RUN pip install pandas_datareader
+RUN pip install mplfinance
+RUN wget --quiet http://prdownloads.sourceforge.net/ta-lib/ta-lib-0.4.0-src.tar.gz -O ta-lib-0.4.0-src.tar.gz && \
+    tar xvf ta-lib-0.4.0-src.tar.gz && \
+    cd ta-lib/ && \
+    ./configure --prefix=/usr && \
+    make && \
+    sudo make install && \
+    cd .. && \
+    pip install TA-Lib && \
+    rm -R ta-lib ta-lib-0.4.0-src.tar.gz
+RUN mkdir /workspace
+CMD ["jupyter-lab", "--ip=0.0.0.0","--port=8888" ,"--no-browser", "--allow-root", "--LabApp.token=''"]
+```
 ### 試したこと

新たなエラーメッセージ

2021/02/24 08:02

投稿

nogish

スコア20

test CHANGED Viewed

File without changes

test CHANGED Viewed

@@ -142,6 +142,24 @@
 ### 試したこと
+追記
+③**chromedriverが起動できていないからでは？と思い、
+ターミナルで、chromedriverと入力**し、
+起動できたのですが、今度は、
+WebDriverException: Message: Service chromedriver unexpectedly exited. Status code was: 127
+という新しいエラーメッセージが返ってきました、、
 ①Dockerを使ったコンテナで、これまでもJupyter Labで行ってきたため、Dockerfileにchromedriverのインストールなどができるように以下のサイトのものをコピペして追加ました。
 https://gist.github.com/varyonic/dea40abcf3dd891d204ef235c6e8dd79
@@ -170,7 +188,7 @@
-②**Dockerfileは関係ないか？と思い、一旦Dockerfileの追記は削除しました。**
+②Dockerfileは関係ないか？と思い、一旦Dockerfileの追記は削除しました。
 ・chromedriverをreinstall直したり、
@@ -180,7 +198,7 @@
-色々試しましたが、**全て結局同じエラーメッセージが出ます**。
+色々試しましたが、全て結局同じエラーメッセージが出ます。

試したことの追加

2021/02/23 09:29

投稿

nogish

スコア20

test CHANGED Viewed

File without changes

test CHANGED Viewed

@@ -8,11 +8,11 @@
-そこでchromedriverのPATHが通らず、
+**そこでchromedriverのPATHが通らず？
 browser.implicitly_wait(3)
-が実行できません。
+が実行できません。**
@@ -70,15 +70,13 @@
 WebDriverException                        Traceback (most recent call last)
-<ipython-input-12-9cb91f83cb8c> in <module>
+<ipython-input-50-73642a135d06> in <module>
       1 # Mac
 ----> 2 browser = webdriver.Chrome()
       3 # Chromedriverが見つかるまでの待ち時間を設定
-      4 browser.implicitly_wait(3)
@@ -144,9 +142,7 @@
 ### 試したこと
-①
-Dockerを使ったコンテナで、これまでもJupyter Labで行ってきたため、Dockerfileにchromedriverのインストールなどができるように以下のサイトのものをコピペして追加ました。
+①Dockerを使ったコンテナで、これまでもJupyter Labで行ってきたため、Dockerfileにchromedriverのインストールなどができるように以下のサイトのものをコピペして追加ました。
 https://gist.github.com/varyonic/dea40abcf3dd891d204ef235c6e8dd79
@@ -174,7 +170,7 @@
-②Dockerfileは関係ないか？と思い、一旦Dockerfileの追記は削除しました。
+②**Dockerfileは関係ないか？と思い、一旦Dockerfileの追記は削除しました。**
 ・chromedriverをreinstall直したり、
@@ -184,7 +180,7 @@
-色々試しましたが、全て結局同じエラーメッセージが出ます。
+色々試しましたが、**全て結局同じエラーメッセージが出ます**。

試したことの追加

2021/02/23 08:51

投稿

nogish

スコア20

test CHANGED Viewed

File without changes

test CHANGED Viewed

@@ -138,15 +138,13 @@
 browser = webdriver.Chrome()
-browser.implicitly_wait(3)
 ```
 ### 試したこと
+①
 Dockerを使ったコンテナで、これまでもJupyter Labで行ってきたため、Dockerfileにchromedriverのインストールなどができるように以下のサイトのものをコピペして追加ました。
@@ -176,4 +174,18 @@
+②Dockerfileは関係ないか？と思い、一旦Dockerfileの追記は削除しました。
+・chromedriverをreinstall直したり、
+・chromeのアップデートとchromedriverをバージョンが合うものでインストールし直したり、
+・chromedriverがひらけなかったので、macのシステム環境設定から開けるようにしたり、
+色々試しましたが、全て結局同じエラーメッセージが出ます。
 お手数おかけしますが、何卒ご回答よろしくお願いします。

使用OSの追加

2021/02/23 08:49

投稿

nogish

スコア20

test CHANGED Viewed

File without changes

test CHANGED Viewed

@@ -13,6 +13,10 @@
 browser.implicitly_wait(3)
 が実行できません。
+Macを使っています。

jupyter notebook → jupyter lab

2021/02/23 07:55

投稿

nogish

スコア20

test CHANGED Viewed

File without changes

test CHANGED Viewed

@@ -2,7 +2,7 @@
-Jupyter notebookで、ストレイピングができるように、勉強をしています。
+Jupyter labで、ストレイピングができるように、勉強をしています。
 （参考動画：https://www.youtube.com/watch?v=LgZ8Li97yoM）