【python】scheduleでスクレイピングを定期実行したい

Question

現在、pythonを用いてwebスクレイピングに取り組んでいます。
scheduleモジュールを用いて、10分毎にjobを実行するプログラムを作っています。

しかし、下記エラーが弾き出されます。

File "autotask.py", line 17
    args = sys.argv #コマンドの引数
    ^
IndentationError: expected an indented block

色々とインデントエラーをしらみ潰しに探したのですが、
エラーから抜け出せなくなり、ご質問させていただきました。

コードは下記になります。

#!/usr/bin/env python
# -*- coding: utf-8 -*-

# 必要なライブラリのインポート
from selenium import webdriver
from selenium.webdriver.common.keys import Keys
import random
import urllib.parse
import time
import datetime
import sys
import traceback
import chromedriver_binary
import schedule

def main():
args = sys.argv #コマンドの引数
####################設定####################

#Chromeを起動
driver = webdriver.Chrome()

#yahoo URL
open_url = "https://www.yahoo.co.jp/"

#yahooのサイトを開く
driver.get(open_url)

#ブラウザを閉じる
#driver.quit()

# PYTHONIOENCODING=utf-8 python3

if __name__ == '__main__':
    # 10分毎にjobを実行
    schedule.every(10).minutes.do(main)

    while True:
        schedule.run_pending()
        time.sleep(1)

お助けいただけますと幸いです。

Answer 1

16行目のdef main():は必要ありません。:は次の行からコードブロックになる合図ですので、少なくとも次の行はインデントが必須となります。しかしインデントされていないので、エラーが発生しています。

Comments

[Yuta25jp]

ありがとうございます。

def main()
を削除すると、

schedule.every(10).minutes.do(main)
の部分でエラー出ます。

このscheduleモジュールの記載自体も変更しないといけないでしょうか？

[toast-uz]

driver.get(open_url)の前にdef main():を移動させて、driver.get(open_url)の行をインデントしてください。

[Yuta25jp]

ありがとうございます。

ご指摘の通り
def main():
driver.get(open_url)

でやってみたのですが、
次は、chromeドライバー起動後にyahooのURLが開かなくなりました。

これはdefの書き方、位置に問題がございますでしょうか？

[toast-uz]

何も問題はありません。schedule.everyは、指定した時間経過した後に初回実行をします。この場合10分待ってください。今回の質問「scheduleでスクレイピングを定期実行したい」は解決しています。

最初にすぐに実行したいのであれば、それは別の質問です。ただし、簡単なので、安易に質問せずに、いろいろ調べて考えてみるとよいでしょう。これが自力で分かるくらいでないと、Pythonでの開発は捗らないと思います。