質問をすることでしか得られない、回答やアドバイスがある。

15分調べてもわからないことは、質問しよう!

新規登録して質問してみよう
ただいま回答率
87.20%
Python 3.x

Python 3はPythonプログラミング言語の最新バージョンであり、2008年12月3日にリリースされました。

Linux

Linuxは、Unixをベースにして開発されたオペレーティングシステムです。日本では「リナックス」と呼ばれています。 主にWebサーバやDNSサーバ、イントラネットなどのサーバ用OSとして利用されています。 上位500のスーパーコンピュータの90%以上はLinuxを使用しています。 携帯端末用のプラットフォームAndroidは、Linuxカーネル上に構築されています。

Ubuntu

Ubuntuは、Debian GNU/Linuxを基盤としたフリーのオペレーティングシステムです。

selenium

Selenium(セレニウム)は、ブラウザをプログラムで作動させるフレームワークです。この原理を使うことにより、ブラウザのユーザーテストなどを自動化にすることができます。

受付中

Seleniumでquit()を使って終了しているが、プロセスが残ってしまいメモリ不足になる。

faker
faker

総合スコア43

Python 3.x

Python 3はPythonプログラミング言語の最新バージョンであり、2008年12月3日にリリースされました。

Linux

Linuxは、Unixをベースにして開発されたオペレーティングシステムです。日本では「リナックス」と呼ばれています。 主にWebサーバやDNSサーバ、イントラネットなどのサーバ用OSとして利用されています。 上位500のスーパーコンピュータの90%以上はLinuxを使用しています。 携帯端末用のプラットフォームAndroidは、Linuxカーネル上に構築されています。

Ubuntu

Ubuntuは、Debian GNU/Linuxを基盤としたフリーのオペレーティングシステムです。

selenium

Selenium(セレニウム)は、ブラウザをプログラムで作動させるフレームワークです。この原理を使うことにより、ブラウザのユーザーテストなどを自動化にすることができます。

0回答

0評価

0クリップ

81閲覧

投稿2022/09/22 13:20

編集2022/09/23 01:45

前提

Seleniumを使ったスクレイピングを趣味で行っています。
OSはUbuntu Server 22.04で、Raspberry Pi 4B にインストールして使っています。
バージョンはPython 3.8.10, Selenium 4.2.0です。

発生している問題・エラーメッセージ

Pythonスクリプトを起動した後はchromedriver関連のプロセスが6つ立ち上がっています。
driver.quit()で終了させた後も5つのプロセスが残っており、メモリを圧迫されます。

起動直後

$ python scraping.py $ ps -x ... 50723 ? Sl 0:00 /snap/chromium/2106/usr/lib/chromium-browser/chromedriver --port=52269 50791 ? Sl 0:04 /snap/chromium/2106/usr/lib/chromium-browser/chrome --allow-pre-commit-input --disable-background-networking --disable-client-side-phishing-detection --disable-default-apps --disable-dev-shm-usage --disable-g 50793 ? S 0:00 /snap/chromium/2106/usr/lib/chromium-browser/chrome --type=zygote --no-zygote-sandbox --no-sandbox --enable-logging --headless --log-level=0 --headless --user-agent=Mozilla/5.0 (Windows NT 10.0; Win64; x64) A 50794 ? S 0:00 /snap/chromium/2106/usr/lib/chromium-browser/chrome --type=zygote --no-sandbox --enable-logging --headless --log-level=0 --headless --user-agent=Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (K 50808 ? Sl 0:01 /snap/chromium/2106/usr/lib/chromium-browser/chrome --type=gpu-process --no-sandbox --disable-dev-shm-usage --enable-logging --headless --log-level=0 --ozone-platform=headless --use-angle=swiftshader-webgl -- 50810 ? Sl 0:03 /snap/chromium/2106/usr/lib/chromium-browser/chrome --type=utility --utility-sub-type=network.mojom.NetworkService --lang=ja --service-sandbox-type=none --no-sandbox --disable-dev-shm-usage --enable-logging - 50847 ? Sl 0:24 /snap/chromium/2106/usr/lib/chromium-browser/chrome --type=renderer --headless --user-agent=Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/79.0.3945.79 Safari/537.36 - ...
$ ps -x 50791 ? Sl 0:04 /snap/chromium/2106/usr/lib/chromium-browser/chrome --allow-pre-commit-input --disable-background-networking --disable-client-side-phishing-detection --disable-default-apps --disable-dev-shm-usage --disable-g 50793 ? S 0:00 /snap/chromium/2106/usr/lib/chromium-browser/chrome --type=zygote --no-zygote-sandbox --no-sandbox --enable-logging --headless --log-level=0 --headless --user-agent=Mozilla/5.0 (Windows NT 10.0; Win64; x64) A 50794 ? S 0:00 /snap/chromium/2106/usr/lib/chromium-browser/chrome --type=zygote --no-sandbox --enable-logging --headless --log-level=0 --headless --user-agent=Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (K 50808 ? Sl 0:01 /snap/chromium/2106/usr/lib/chromium-browser/chrome --type=gpu-process --no-sandbox --disable-dev-shm-usage --enable-logging --headless --log-level=0 --ozone-platform=headless --use-angle=swiftshader-webgl -- 50810 ? Sl 0:03 /snap/chromium/2106/usr/lib/chromium-browser/chrome --type=utility --utility-sub-type=network.mojom.NetworkService --lang=ja --service-sandbox-type=none --no-sandbox --disable-dev-shm-usage --enable-logging - 50847 ? Sl 0:24 /snap/chromium/2106/usr/lib/chromium-browser/chrome --type=renderer --headless --user-agent=Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/79.0.3945.79 Safari/537.36 -

該当のソースコード

Pythonスクリプトが途中終了しても正常にSeleniumを終了させるようにしています。

Python

from selenium import webdriver options.add_argument('--headless') options.add_argument('--no-sandbox') options.add_argument('--disable-dev-shm-usage') options.add_argument('--disable-gpu') options.add_argument('--lang=ja-JP') options.add_argument(f'user-agent=Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/79.0.3945.79 Safari/537.36') #追加 try: driver = webdriver.Chrome(executable_path="/usr/bin/chromedriver", options=options) (いろんな処理) finally: driver.quit() sys.exit()

試したこと

killall chromedriverでプロセスは落とせることは確認しましたが、2つ同時で別のスクリプトを起動させたいときに面倒なので個別で落とせるようにしたいです。

良い質問の評価を上げる

以下のような質問は評価を上げましょう

  • 質問内容が明確
  • 自分も答えを知りたい
  • 質問者以外のユーザにも役立つ

評価が高い質問は、TOPページの「注目」タブのフィードに表示されやすくなります。

気になる質問をクリップする

クリップした質問は、後からいつでもマイページで確認できます。

またクリップした質問に回答があった際、通知やメールを受け取ることができます。

teratailでは下記のような質問を「具体的に困っていることがない質問」、「サイトポリシーに違反する質問」と定義し、推奨していません。

  • プログラミングに関係のない質問
  • やってほしいことだけを記載した丸投げの質問
  • 問題・課題が含まれていない質問
  • 意図的に内容が抹消された質問
  • 過去に投稿した質問と同じ内容の質問
  • 広告と受け取られるような投稿

評価を下げると、トップページの「アクティブ」「注目」タブのフィードに表示されにくくなります。

まだ回答がついていません

会員登録して回答してみよう

15分調べてもわからないことは
teratailで質問しよう!

ただいまの回答率
87.20%

質問をまとめることで
思考を整理して素早く解決

テンプレート機能で
簡単に質問をまとめる

質問する

関連した質問

同じタグがついた質問を見る

Python 3.x

Python 3はPythonプログラミング言語の最新バージョンであり、2008年12月3日にリリースされました。

Linux

Linuxは、Unixをベースにして開発されたオペレーティングシステムです。日本では「リナックス」と呼ばれています。 主にWebサーバやDNSサーバ、イントラネットなどのサーバ用OSとして利用されています。 上位500のスーパーコンピュータの90%以上はLinuxを使用しています。 携帯端末用のプラットフォームAndroidは、Linuxカーネル上に構築されています。

Ubuntu

Ubuntuは、Debian GNU/Linuxを基盤としたフリーのオペレーティングシステムです。

selenium

Selenium(セレニウム)は、ブラウザをプログラムで作動させるフレームワークです。この原理を使うことにより、ブラウザのユーザーテストなどを自動化にすることができます。