xserver環境でpython+seleium+chromeを動かしたい。(クリックな必要なwebサイトのスクレイピングを実施したい)

Question

前提・実現したいこと

xserverでスクレイピングした情報を集約するwebアプリを作っています。herokuでは簡単にデプロイできて運用できているのですが、xserverではうまく動きません。chromeのwebdriverのほかにchromeのインストールが必要だと分かった次第です。インストール方法が分からないのですが、どなたかご教授いただけますでしょうか。

原因を探るためにまず、xserver+python3.7.5+selenium+chromeの構成で下記のように単純なものを作成しました。必要なものは全てpip3インストール済で、単純なflaskによる表示や、hello worldのような表示は実施できましたが、chromeを使ったスクレイピングがうまくいかない状態です。

options = webdriver.ChromeOptions()
chromedriver_path = "/morizoon.xsrv.jp/public_html/test1/chromedriver"
driver = webdriver.Chrome(chromedriver_path, options=options)


driver.get("https://kakaku.com/")
html = driver.page_source
print( html)

driver.close()# ブラウザを閉じる
driver.quit() # chromedriver.exeを閉じる

これを実行すると下記メッセージが出てきます。

selenium.common.exceptions.WebDriverException: Message: unknown error: cannot find Chrome binary

ググって検索していくと、chromeのwebdriverのほかにchromeのインストールが必要だと分かった次第です。インストール不要の便利なwebブラウザとか無いでしょうか？もしくはxserverで「クリックが必要なwebサイトのスクレイピング」を実行する方法がありましたら他の言語でもかまわないのでアイデアをいただきたくよろしくお願いします。

ちなみにxserverは共用サーバー？なので管理者権限が無く、chromeがインストールできない可能性が高いです。

Answer 1

Windowsなんかはユーザー権限でインストール出来るので、出来ると思いますよ

https://askubuntu.com/questions/198014/install-google-chrome-ubuntu-12-04-without-sudo

ココにそれっぽい事書いてありますし。

https://askubuntu.com/questions/114384/how-to-install-chromium-zip-file

Comments

[nkiki]

ちょっと、記事を頼りに頑張ってみます。少しお時間をください。xserver契約者の追加回答があるかもしれないんので、もう少し待ちます

Answer 2

10日くらい前にも全く同じ質問してた方がいましたが、
chromeがインストール出来ないのであれば curlなどで頑張るしかないんじゃないんですかね。

Comments

[nkiki]

ご回答ありがとうございます。なんとか、herokuで動かしているアプリを移植したいといろいろとググってはいるものの情報が無く。。。。curlは全く知らないので、これから勉強します。他に知っている方がいればよいですが。。。。

[scsi]

出来ないことはさっさと諦めて、conohaやさくらのVPSなどの出来る環境を使う方がいいですよ

[nkiki]

ご指摘ありがとうございます。三年間分のお金を払ってしまったので、なんとかxserverで実施したくチャレンジしているところです。。。。やりたいことができるのか少し調べてから契約すればよかったと後悔しまくってますが。。。ドメイン込みで月900円だったので飛び込んでしまいました。