Seleniumで1秒待機してから次のページへ移動する方法

Question

Seleniumでのスクレイピング

質問内容は表題の通りです。
Seleniumを用いてあるサイトのスクレイピングをしたく、コードを書いています。
ただ、初心者であるため、誤ってサーバーへのアタックとならないように注意を払いたく、
質問をさせていただきます。

対象となるサイトは、数十ページにわたって、売れ行きのランキングを表示しているサイトです。
やりたい事としては、下記の通りです。

1. 1ページ目の最初から商品タイトルを収集してリストに格納
2. 終わったら次のページに移動して、上から商品タイトルを収集
3. 最後のページまで反復

手順2に関して、一定の待機時間を設けないと、先方のサイトに迷惑をかけてしまうかと思いますので、
待機時間を設ける方法を教えていただけますと幸いです。

既存のページでも色々と調べたのですが、どのようにすればいいのか、判断がつかず、
何卒よろしくお願いします。

該当のソースコード

browser = webdriver.Chrome()
browser.get('https://XXXXXXXXXXXXXXXXXXXXXXXXX_ranking')

service_list = []
for i in range(68):
    elem_contents_data = browser.find_elements_by_class_name('listContentData')
    for data in elem_contents_data:
        elem_content_category = data.find_element_by_css_selector('h3')
        service_list.append(elem_content_category.text)

    pager = browser.find_element_by_class_name('pager')
    next_button = pager.find_element_by_class_name('next')
    next_button.click

Answer 1

下記の認識にてよろしいでしょうか。
next_button.clickの1行前に入れ込み、確認してみて下さい。

import time

time.sleep(1)

Comments

[J1N]

ご教示いただいたコードを入れて試してみたところ、うまくいっているようでした。
大変助かりました。
ありがとうございます。