for文を用いて、複数のURLをwebスクレイピングし要素を取得することができません。

Question

前提・実現したいこと

プログラミング初学者です。

googleスプレッドシートに並んでいるURLを順番にseleniumで取得し、
ページから情報を取得するスクリプトを作りたいです。
スプレッドにあるURLをseleniumで順番に取得するやり方は分からなかったので一旦置いておきます。
問題は、サイトから情報を取得する部分です。

アリエクスプレスというサイトから左上にあるお店の評価の数字を取得するのですが、
for文で繰り返しをすると失敗してしまいました。
単品のURLだと取得に成功しました。

以下がアリエクスプレスのURLです。
こういう感じのURLがスプレッドシートに400ページ分ほどあります。

https://ja.aliexpress.com/item/1005001304475739.html?aff_fcid=1af49e0e084a421c97a6b9290e4f085e-1633494138716-06135-c4uxd3MG&aff_fsk=c4uxd3MG&aff_platform=link-c-tool&sk=c4uxd3MG&aff_trace_key=1af49e0e084a421c97a6b9290e4f085e-1633494138716-06135-c4uxd3MG&terminal_id=6f0594ad961743a1b3d0874ed9831883

https://ja.aliexpress.com/item/4001017281680.html?aff_fcid=272ff68d04eb4b9997820f12af9b9e4b-1633494533717-03725-c4uxd3MG&aff_fsk=c4uxd3MG&aff_platform=link-c-tool&sk=c4uxd3MG&aff_trace_key=272ff68d04eb4b9997820f12af9b9e4b-1633494533717-03725-c4uxd3MG&terminal_id=6f0594ad961743a1b3d0874ed9831883

https://ja.aliexpress.com/item/4000682729348.html?aff_fcid=472ab0b41f434d03b16ab1b100bfb6ff-1633494601699-09181-c4uxd3MG&aff_fsk=c4uxd3MG&aff_platform=link-c-tool&sk=c4uxd3MG&aff_trace_key=472ab0b41f434d03b16ab1b100bfb6ff-1633494601699-09181-c4uxd3MG&terminal_id=6f0594ad961743a1b3d0874ed9831883

失敗したソースコード

!pip install selenium
from selenium import webdriver
import time
urls = [
'https://ja.aliexpress.com/item/1005001304475739.html?aff_fcid=1af49e0e084a421c97a6b9290e4f085e-1633494138716-06135-c4uxd3MG&aff_fsk=c4uxd3MG&aff_platform=link-c-tool&sk=c4uxd3MG&aff_trace_key=1af49e0e084a421c97a6b9290e4f085e-1633494138716-06135-c4uxd3MG&terminal_id=6f0594ad961743a1b3d0874ed9831883',
'https://ja.aliexpress.com/item/4001017281680.html?aff_fcid=272ff68d04eb4b9997820f12af9b9e4b-1633494533717-03725-c4uxd3MG&aff_fsk=c4uxd3MG&aff_platform=link-c-tool&sk=c4uxd3MG&aff_trace_key=272ff68d04eb4b9997820f12af9b9e4b-1633494533717-03725-c4uxd3MG&terminal_id=6f0594ad961743a1b3d0874ed9831883',
'https://ja.aliexpress.com/item/4000682729348.html?aff_fcid=472ab0b41f434d03b16ab1b100bfb6ff-1633494601699-09181-c4uxd3MG&aff_fsk=c4uxd3MG&aff_platform=link-c-tool&sk=c4uxd3MG&aff_trace_key=472ab0b41f434d03b16ab1b100bfb6ff-1633494601699-09181-c4uxd3MG&terminal_id=6f0594ad961743a1b3d0874ed9831883'
]
for url in urls:
    browser = webdriver.Chrome()
    browser.get(url)
    browser.find_element_by_class_name("store-container").find_element_by_tag_name('i').text
    time.sleep(1)
    browser.close()

エラーは何も出ていませんが評価の取得はできていないです。
ウィンドウを立ち上げて閉じる操作は実行できていました。

###成功したソースコード
単品のURLなら、以下のコードで取得ができました。

!pip install selenium
from selenium import webdriver
import time
browser = webdriver.Chrome()
browser.get('https://ja.aliexpress.com/item/4001017281680.html?aff_fcid=272ff68d04eb4b9997820f12af9b9e4b-1633494533717-03725-c4uxd3MG&aff_fsk=c4uxd3MG&aff_platform=link-c-tool&sk=c4uxd3MG&aff_trace_key=272ff68d04eb4b9997820f12af9b9e4b-1633494533717-03725-c4uxd3MG&terminal_id=6f0594ad961743a1b3d0874ed9831883')
browser.find_element_by_class_name("store-container").find_element_by_tag_name('i').text

実行結果は以下のようにでてきます。
'95.7%'

###成功したソースコードその2

urls = [
'https://ja.aliexpress.com/item/1005001304475739.html?aff_fcid=1af49e0e084a421c97a6b9290e4f085e-1633494138716-06135-c4uxd3MG&aff_fsk=c4uxd3MG&aff_platform=link-c-tool&sk=c4uxd3MG&aff_trace_key=1af49e0e084a421c97a6b9290e4f085e-1633494138716-06135-c4uxd3MG&terminal_id=6f0594ad961743a1b3d0874ed9831883',
'https://ja.aliexpress.com/item/4001017281680.html?aff_fcid=272ff68d04eb4b9997820f12af9b9e4b-1633494533717-03725-c4uxd3MG&aff_fsk=c4uxd3MG&aff_platform=link-c-tool&sk=c4uxd3MG&aff_trace_key=272ff68d04eb4b9997820f12af9b9e4b-1633494533717-03725-c4uxd3MG&terminal_id=6f0594ad961743a1b3d0874ed9831883',
'https://ja.aliexpress.com/item/4000682729348.html?aff_fcid=472ab0b41f434d03b16ab1b100bfb6ff-1633494601699-09181-c4uxd3MG&aff_fsk=c4uxd3MG&aff_platform=link-c-tool&sk=c4uxd3MG&aff_trace_key=472ab0b41f434d03b16ab1b100bfb6ff-1633494601699-09181-c4uxd3MG&terminal_id=6f0594ad961743a1b3d0874ed9831883'
]

for url in urls:
    browser = webdriver.Chrome()
    browser.get(url)
    time.sleep(1)
    browser.close()

ブラウザを開いてURLを開き、閉じる、という操作はfor文で繰り返しても問題ありませんでした。
これに「評価を取得する」という工程を加えるとうまく動きません。

###ツールのバージョン
windows10
python3.9 64bit
jupyter lab

Comments

[meg_]

> エラーは何も出ていませんが評価の取得はできていないです。
”取得できていない”ことをどのように確認されましたか？

[ama178]

jupyter lab の、該当のソースコードの次の行に、実行結果が何も表示されていないことからそう判断しました。

[meg_]

エラーが出ないのであれば取得出来ているのでは？print()で出力して確かめられてはどうでしょうか？
※対象サイトの利用規約が確認できなかったため当方では検証出来ませんでした。

[ama178]

print関数で出力してみたら取得できていました！
僕がまだ何も分かっていないだけでした・・・
ありがとうございました。

Answer 1

何も問題なかったことが分かりました。
助言頂いたmeg_さんありがとうございました。