crondから動かすとスクレイピングができない

Question

#pythonでスクレイピングを行う処理があります。
#開発環境のサーバーではcronから正常に稼働するのに本番環境のサーバーではcronから起動はするのですが、スクレイピングの処理ができません。待ち状態な感じです。
#簡単なスクレイピングのプログラムを作って調べたところコマンドからは正常に動作し中身もとれています。cronからは起動後最初のアドレスの返事待ちで待っているようです。

Answer 1

端末からだとうまくいくのに、cronからだとうまくいかない原因としては、
・環境変数の違い（cronからだとあまりセットされないし、PATHも違う）
・カレントディレクトリの違い
・標準入出力が端末でないことによる動作の違い
等。

Comments

[sarasa_38765]

簡単なスクレイピングのプログラムで試したのですが、コマンドからたたくとchromeのプロセスが立ち上がるのにcronからだとchromeのプロセスは出ないです。ちなみにどちらもrootなので動作は一緒なんですが。。開発の環境ではcronでもちゃんと起動するんですよ。

[otn]

回答の意味が分かりませんか？

[sarasa_38765]

printenvで環境変数調べてcronに記述したところ正常に動作しました。本番環境ではproxyが設定されていたのでそれをconnに記述しておかないと外に出れないよという事みたいでした、

Answer 2

ユーザが違うとかカレントディレクトリ違うとかファイル構成変わってるとか単なるバグだとか。

なんかログファイルでも作るようにして動作を追いかけてみればどうでしょ

Comments

[sarasa_38765]

ログは確認していまして、もっと細かく吐いて確認している最中です。

[y_waiwai]

どこかでエラーして落ちてるんでしょうねえ