python×selenium for文によるループ処理でループしないのですが、なぜうまくいかないのでしょうか？

Question

前提・実現したいこと

pythonでfor文によるループ処理をしたいのですが、ループせずに処理が止まってしまう状況です。
エラーは出ずに処理が停止する状況です

発生している問題個所

  #IDを引き抜く
    USERID_PATH = '/html/body/div[3]/div[2]/div/article/header/div[2]/div[1]/div[1]/h2'
    userids=[]
    userid_lists = driver.find_elements_by_xpath(USERID_PATH)
    for userid_list in userid_lists:
        userid = userid_list.text
        userids.append(userid)
        print(userid)
        time.sleep(random.randint(3,8))
        round_page = driver.find_element_by_css_selector(NEXT_PAGE_SELECTOR)
        round_page.click()
        time.sleep(random.randint(3,8))

やりたいこととしましては、まずuseridを取得後、NEXTPAGEに遷移して、またuseridを取得し、次のページへ遷移するという挙動をしたいです
上記コードにおける

        round_page = driver.find_element_by_css_selector(NEXT_PAGE_SELECTOR)

ここまではたどり着くのですが、次のuseridを取得せずに止まってしまいます。
お力添え、よろしくお願いいたします。

コード全文

from selenium import webdriver
from selenium.webdriver.common.keys import Keys
import urllib.parse
import time
import random

#Webdriver
driver = webdriver.Chrome("C:/Users/yutam/Downloads/chromedriver_win32/chromedriver.exe")

#URL
MAIN_URL = "https://www.XXXX.com/"
TAG_SEARCH_URL = MAIN_URL + "explore/tags/{}/?hl=ja"

#selectors
LOGIN_PATH = '//*[@id="react-root"]/section/main/article/div[2]/div[2]/p/a'
LIKE_PATH = "//button/span[@class='glyphsSpriteHeart__outline__24__grey_9 u-__7']"
LIKE_BUTTON_PATH = "//button[@class='dCJp8 afkep _0mzm-']"

MEDIA_SELECTOR = 'div._9AhH0' #表示されているメディアのwebelement
NEXT_PAGE_SELECTOR = 'a.coreSpriteRightPaginationArrow' #次へボタン

#USER INFO(ユーザ名とパスワードをここにいれてください。)
username = "XXXXX"
password = "XXXXXX"
#params
tagName = "海外旅行"


if __name__ == '__main__':

    #login 
    driver.get(MAIN_URL)
    time.sleep(random.randint(2, 7))
    driver.find_element_by_xpath(LOGIN_PATH).click()
    time.sleep(random.randint(2, 7))
    usernameField = driver.find_element_by_name('username')
    usernameField.send_keys(username)
    time.sleep(1)
    passwordField = driver.find_element_by_name('password')
    passwordField.send_keys(password)
    time.sleep(random.randint(2, 7))
    passwordField.send_keys(Keys.RETURN)
    
    time.sleep(random.randint(2, 7))

    #通知解除
    notification_button = driver.find_element_by_class_name('HoLwm')
    notification_button.click()
    time.sleep(random.randint(2, 7))
   
 #tag search
    
    encodedTag = urllib.parse.quote(tagName) #普通にURLに日本語は入れられないので、エンコードする
    encodedURL = TAG_SEARCH_URL.format(encodedTag)
    print("encodedURL:{}".format(encodedURL))
    driver.get(encodedURL)

    #media click
    time.sleep(random.randint(2, 7))
    driver.implicitly_wait(10)
    driver.find_element_by_css_selector(MEDIA_SELECTOR).click()
    time.sleep(random.randint(2, 7))
 
    #userid,like,URL,folowwers,followsを取得したい
    #まずidとフォロワー取得
    
    
    #NUM_LIKED_PATH = '//*[@id="react-root"]/section/main/div/div/article/div[2]/section[2]/div/div[2]/button/span'
    
    #NUM_FOLLOWER_PATH = '//*[@id="react-root"]/section/main/div/header/section/ul/li[2]/a/span'
    #NUM_FOLLOW_PATH = '//*[@id="react-root"]/section/main/div/header/section/ul/li[3]/a/span'
    
    #liked_list = drive.find_element_by_xpath(NUM_LIKED_PATH)
    #folower_list = drive.find_element_by_xpath(NUM_FOLLOWER_PATH)
    #folow_list = drive.find_element_by_xpath(NUM_FOLLOW_PATH)
    
    #ユーザIDだけ引き抜けるか実験
    postCOUNTER=0
    postMAX=5
    
    
        
    #IDを引き抜く
    USERID_PATH = '/html/body/div[3]/div[2]/div/article/header/div[2]/div[1]/div[1]/h2'
    userids=[]
    userid_lists = driver.find_elements_by_xpath(USERID_PATH)
    for userid_list in userid_lists:
        userid = userid_list.text
        userids.append(userid)
        print(userid)
        time.sleep(random.randint(3,8))
        round_page = driver.find_element_by_css_selector(NEXT_PAGE_SELECTOR)
        round_page.click()
        time.sleep(random.randint(3,8))
        

    

実行環境（FW/ツールのバージョンなど）

python 3.7
Jupyter notebook
Selenium

Comments

[meg_]

「ループせずに処理が止まってしまう状況」とはどういうことでしょうか？
エラーで止まるということですか？　他の状況でしょうか？

[growthhackoji3]

エラーは出ずに処理が停止する状況です。
追記させていただきました！

Answer 1

1ページ目に全ユーザーIDが乗っていないなら
そもそもfor文で書くことが誤っていると思います。

while True:
    user_id = driver.find_element # 略
    user_ids.append(user_id.text)
    try:
        round_page = driver.find_element_by_css_selector(NEXT_PAGE_SELECTOR)
    except NoSuchElementException:
        # 次のページへボタンが押せない、つまり最後のページまで読み切った
        break
    round_page.click()

後xpathやcss_selectorに頼りすぎているので、
これだと途中でNoSuchElementExceptionを起こす可能性が高いです。
find_element_by_idやfind_element_by_class_nameやfind_element_by_link_textなどが使えたら
なるべくそちらを利用するようにしてください。

Comments

[growthhackoji3]

上記のコーデでうまくいきました！

初心者なので問題個所の具体的なコードだけでなく、そのほかの部分までアドバイスいただき本当に助かりました！ありがとうございます！

Answer 2

このループでは、1ページ目のHTMLからしかUserIDを取得できていないように思えます。

以下の処理でUserIDを取得している認識で正しいのであれば、
この処理は、ページ遷移後にも行わなければならないと思います。
なので、for文の中に取得処理を追加すれば次のページでも問題なく取得できるのではないでしょうか。

userid_lists = driver.find_elements_by_xpath(USERID_PATH)