seleniumをレンタルサーバやPaasで自動実行させるには？

Question

サーバ系のことが分からず、その可否を教えてください。

◼ 前提
Mac/python3 上でseleniumプログラムを開発し、ブラウザ自動操作を行っております。
WEBアプリAのデータをCSVでDLし、WEBアプリBに転載する そんな感じです。

◼ 検討事項
でも、結局いまのとこPCありきの話で、「完全自動」というに感じでは無いです。
なので、これをサーバ上にUPし、cronなど定期実行させる ということをシたいです。

◼ おもわれる課題
seleniumはあくまでブラウザを扱っているので、これをレンタルサーバやPaasで動かすなんてことはできるのでしょうか。全くココらへんがわからず。
調べても出てこないってことは、やはり無理なんですかね。

Answer 1

ヘッドレスに処理できるブラウザを使います。
以前までは PhantomJS が主流でしたが、今後は Headless Chromium が主流になりそうです。

https://duo.com/blog/driving-headless-chrome-with-python

Comments

[K_9301]

詳細なリンク、有難うございます。参考にさせていただきます。

Answer 2

seleniumはあくまでブラウザを扱っているので、これをレンタルサーバやPaasで動かすなんてことはできるのでしょうか。

GUIを持たないOSであっても、仮想ブラウザという仕組みがありますのでPaaSについてはよくわかりませんがレンタルサーバーについてはSeleniumでも動作させることはできるのではないでしょうか？

Seleniumで試したことはないのですが、同様にツールにPhantomJSというものがありそちらの方ではレンタルサーバーでも正常に動作することを確認しております。

---

ただ、質問者様の今回のやりたいことにSeleniumを使う必要があるのか？というところに疑問があります。

やりたいことは

• CSVのダウンロード
• CSVのアップロード

であり、ブラウザ上からそれらのリクエストに必要な情報は得られるはずです。

であれば、単純なHTTPクライントライブラリを利用して処理を実装したほうがシンプルにやりたいことを実現できるかと思います。

Comments

[K_9301]

ありがとうございます。
めんどくさい認証をする必要があったりするので、Seleniumのほうが楽ということで
今回は通信系ライブラリを使わない感じです。。
実際に動かした、ということを聞けて参考になりました。
有難うございます。