WEBサイトを開き、テキストボックスに文字を入力したい

Question

前提・実現したいこと

webbrowserでWEBサイトを開き、テキストボックスなどに文字を入力したいです。

以下のようにyahooを開き、検索ウィンドウに柴犬と入力したいのです。

import webbrowser
from selenium import webdriver
webbrowser.open('https://www.yahoo.co.jp/')
webbrowser.find_element_by_name("p").send_keys("柴犬")

色々なサイトなどを探索すると下記のようにwebdriverを使う手法があります。

driver = webdriver.Chrome()
driver.get('https://www.google.com')

seleniumなどを使ったものを試したのですが、ログインしているサイトがログアウトされた状態で開かれるので、何とか既存の使用中のchromeでwebbrowserで開きたいのです。
するとログイン状態を持続したまま開かれるので。

発生している問題・エラーメッセージ

webbrowser.open('https://www.yahoo.co.jp/')
で、Yahooは開くのですがそれで終わってしまいます。

AttributeError: module 'webbrowser' has no attribute 'find_element_by_name'

該当のソースコード

import webbrowser
from selenium import webdriver
webbrowser.open('https://www.yahoo.co.jp/')
webbrowser.find_element_by_name("p").send_keys("柴犬")

他にも色々試行錯誤した過程で
AttributeError: 'str' object has no attribute 'element'
といったエラーも出てました。

試したこと

色々試し過ぎてわからなくなりました。
またAttributeError: module 'webbrowser' has no attribute・・・
も検索しまくっているけど結局わからないです。

そもそも、find_element_by_nameの前にはwebbrowser.ではなく、
webdriverだけしか駄目なのでしょうか？

補足情報（FW/ツールのバージョンなど）

ここにより詳細な情報を記載してください。

Answer 1

最初から自動でブラウザを開いてログインさせた方が早いですよ。

from selenium import webdriver
from selenium.webdriver.chrome.options import Options
from time import sleep

options = Options()
options.add_argument('--headless')
options.add_argument('--no-sandbox')
options.add_argument('--ignore-certificate-errors')

driver = webdriver.Chrome(options=options)

# ヤフーを開く
driver.get('https://www.yahoo.co.jp/')

# 念のため5秒待つ
sleep(5)

# ログインをクリック
driver.find_element_by_link_text('ログイン').click()

# ユーザー名を入力
driver.find_element_by_id('username').send_keys('ユーザ名')

# 次へ(青い四角)をクリック
driver.find_element_by_id('btnNext').click()

# パスワードを入力
driver.find_element_by_id('passwd').send_keys('パスワード')

# ログイン(青い四角)をクリック
driver.find_element_by_id('btnSubmit').click()

# ブラウザがログインを覚えたが、
# ヤフーはログイン後、稀にお知らせなどを表示してくることがあるので
# 再度開きなおす
driver.get('https://www.yahoo.co.jp/')

# 念のため5秒待つ
sleep(5)

# 検索欄に柴犬と入力する
driver.find_element_by_xpath('//input[@type="search"]').send_keys('柴犬')

# 検索ボタンをクリック
driver.find_element_by_xpath('//span[text()="検索"]/../..').click()

# 念のため5秒待つ
sleep(5)

# 検索結果のページソースを表示
print(driver.page_source)

# Seleniumの終了
driver.quit()

スクレイピングに限った話ではないですが、とにかく環境構築が一番大変です。
このプログラムもあなたの環境でそのまま動く保証はありません。
(主にoptionsの問題だと思います。他にも色々あるのでうまくいかなかったら探してみてください。)

始めたばかりだとそうは思えないかもしれないですが、
環境さえできてしまえば、このプログラムにあるような
対象サイトの特性把握やxpathの取得方法などの勉強は大したことありません。

Comments

[退会済みユーザー]

ありがとうございました。
僕のやり方や環境構築といったものが悪いと思うのですがやはり出来ませんでした。
ただ、いただいたコードを改良して使わせていただきます。