selenium、chromedriverを使用したPythonコードをAWS lambdaで動かしたい

Question

AWS lambdaでselenium、chromedriverを使用したPythonプログラムを動かす際、それぞれのバージョンをどれにすればよいのか。現時点で互換性のとれた組み合わせを教えていただきたいです。
また、できれば今回のように開発を行う上で互換性のあるバージョンを選定する判断の過程を教えていただきたいです（すべて最新版を選ぶと動作が安定していない場合があると認識しています）。

上記を使用したクローリングのプログラムをすでに実装しており、ローカル環境では問題なく動作しておりますが、lamdaへデプロイ、テストを実施した際にエラーが発生します。原因の切り分けを行ううえで、まずは互換性の問題を解消したいと考えております。

【エラー内容】

[ERROR] NoSuchDriverException: Message: Unable to obtain chromedriver using Selenium Manager; Message: Unsuccessful command executed: /opt/python/lib/python3.9/site-packages/selenium/webdriver/common/linux/selenium-manager --browser chrome --output json; Expecting value: line 1 column 1 (char 0)
; For documentation on this error, please visit: https://www.selenium.dev/documentation/webdriver/troubleshooting/errors/driver_location

なお、以下のサイトで示された手順を実施しています。

【参考URL】
https://dev.classmethod.jp/articles/aws-lambda-python-selenium-make-env/

Answer 1

この回答はGPT-4による自動生成回答です

AWS LambdaでSeleniumとChromeDriverを使用する場合、以下のバージョンが互換性があるとされています。

• Selenium: 3.141.0
• ChromeDriver: 2.37
• Headless Chrome: 65.0.3325.181

これらのバージョンは、AWS Lambdaのランタイム環境に対応しています。

バージョンの選定については、以下のような観点から判断します。

1. 公式ドキュメンテーション: SeleniumやChromeDriverの公式ドキュメンテーションを確認し、それぞれのバージョン間の互換性を確認します。
2. ランタイム環境: AWS Lambdaのランタイム環境（Pythonのバージョンなど）と互換性のあるバージョンを選択します。
3. 安定性: 最新版は新機能が追加されている反面、不具合が含まれている可能性もあります。そのため、一定期間テストされ、安定しているとされるバージョンを選択します。

エラーメッセージからは、ChromeDriverが見つからないという問題が発生しているようです。AWS Lambdaでは、ChromeDriverをLambdaレイヤーに追加し、Lambda関数から参照できるように設定する必要があります。参考URLの手順に従って設定を行った場合、問題は発生しないはずです。設定が正しく行われているか再度確認してみてください。