Python スクレイピングにおけるtime.sleepを記述する場所

Question

Python スクレイピングにおけるtime.sleepを記述する場所

お世話になっております。

表題の件ですが、スクレイピング学習中に疑問に思いました。
相手サーバー様に迷惑をかけないよう、1秒開けるコード(time.sleep)を入れようとしているのですが、
どの部分に入れれば良いのか迷っております。

①～⑤のどの部分に対して書くべきか、ご教示頂けないでしょうか。
お手数ですが、宜しくお願い致します。

該当のソースコード

import time
from bs4 import BeautifulSoup
from selenium import webdriver

dr = webdriver.Chrome()

# ①Webページを取得
dr.get("http://-------------")

# ②日付指定をして、検索ボタンを押す
from_day = dr.find_element_by_xpath("path1")
from_day.click()
to_day = dr.find_element_by_xpath("path2")
to_day.click()
sb_btn = dr.find_element_by_xpath("path3")
sb_btn.click()

# ③表示されたWebページを解析する
dr_page = dr.page_source
dr_sp_data = BeautifulSoup(dr_page,"html.parser")

# ④保存用のファイルを作る
timestr = time.strftime("%Y%m%d")
new_file = "./dr_file_" + timestr + ".csv"

# ⑤解析したWebページのaタグを書き込む
with open(new_file,"w",encoding="utf_8_sig") as nf:
    for dr_a in dr_sp_data.find_all("a"):
        nf.write(dr_a)

dr.quit

補足情報（FW/ツールのバージョンなど）

Python 3.8.5

Answer 1

ページ遷移の直後（直前でもいいですが）に置けば良いと思います。
もしくは、クリックなどすべてのアクションの後（クリックでアクセスが発生する可能性もあるので）。

1秒で十分かはサイトに依るでしょうね。

Comments

[jissin12]

有難う御座います!