python seleniumで条件を指定して取得した検索結果について

Question

pythonのseleniumでスクレイピングをする際に条件を入力してchromeが立ち上がり、目的のページが開いた時の検索結果と
実際のchromeで同じページを同じ条件で開いた時の検索結果が異なる場合があります。
例えば下記のコードでページを開いたときにでてくる検索結果が異なります。(hogeとhoge2が検索条件です。)

temp_url ='https://jp.indeed.com/%E6%B1%82%E4%BA%BA?q={}&l={}&limit=15'
url = temp_url.format('hoge','hoge2')
driver = webdriver.Chrome(executable_path=r'C:\Users\yonem\Dropbox\Python\chromedriver.exe.exe', chrome_options=options)
wait = WebDriverWait(driver=driver, timeout=30)
driver.implicitly_wait(10)
driver.get(url)

原因と対策の施しようがある場合ご教授いただければ幸いです。よろしくお願いいたします。

Comments

[otn]

具体的には、ブラウザのアドレスバーに、https://jp.indeed.com/%E6%B1%82%E4%BA%BA?q=hoge1&l=hoge2&limit=15
を打ち込んだ場合と、
driver.get("https://jp.indeed.com/%E6%B1%82%E4%BA%BA?q=hoge1&l=hoge2&limit=15")
の場合の結果が異なるということで合ってますか？

[nobu0000]

ご返信ありがとうございます。
おっしゃる通りです。原因と解決策がございましたらご教授いただければ幸いです。
よろしくお願いいたします。

[otn]

そうですか。画面の入力欄に検索語を入力したのなら違うこともあるだろうと思ったのですが、
同じURLだとすると思い当たることは無いです。
検索語がhogeとかじゃなくて日本語の場合はどちらのケースも適切に%でエンコードした状態ですよね？

[nobu0000]

申し訳ございません、ログインした場合としなかった場合で検索結果が異なるようです。
seleniumではログイン処理をしていなかったため違う検索結果となりました。
お忙しいところ大変失礼いたしました。