【スクレイピング】ダウンロードダイアログの扱い方が分からない

Question

実現したいこと

PythonとSeleniumを使用してスクレイピングを業務のために実装しようとしています。
そこで、自動で操作している最中に画像のようなダウンロードダイアログが表示されるのですが、保存ボタンを押下して、先に進みたいです。

発生している問題・分からないこと

スレッドを二つに分けて実行しているのですが、上手くいきません。
以下のコードはマウスを移動してクリックする操作を実装しようとしていますが、マウスは移動するもののクリックすることができません。
問題点やもっと確実な方法があれば教えて頂きたいです。

該当のソースコード

from selenium import webdriver
from selenium.webdriver.common.keys import Keys
from selenium.webdriver.common.by import By
from selenium.webdriver.support.ui import WebDriverWait
from selenium.webdriver.support import expected_conditions as EC
import asyncio
import time
import input
import buttonClick
import pyautogui
import nest_asyncio
import threading

def pushS():
    print("タイマー起動")
    time.sleep(60)
    pyautogui.click(814,551,button="right")
    print("処理実行済み")

def siteOperations():
    # WebDriverを作成（IE）
    driver = webdriver.Ie()
    # ウェブページを開く
    driver.get("")

    #ユーザー名の入力
    input.inputID(driver,'NaviFrame',"UserName","")
    # パスワードの入力
    input.inputID(driver,'NaviFrame','PassWord',')
    # ログインボタンをクリック
    buttonClick.buttonClickID(driver,'NaviFrame','button1')


    #契約データ抽出画面の表示
    time.sleep(2)
    driver.get("")


    # [...]ボタンをクリック
    buttonClick.buttonClickName(driver,'Rep5Main','select_code')
    # [498]ボタンをクリック
    buttonClick.buttonClickName(driver,'Rep5Sub','code386')
    # [設定]ボタンをクリック
    buttonClick.buttonClickName(driver,'Rep5Sub','set_btn_add')

    #開始年の入力
    input.inputName(driver,'Rep5Main',"start_year","2024")
    #開始月の入力
    input.inputName(driver,'Rep5Main',"start_month","1")
    #終了年の入力
    input.inputName(driver,'Rep5Main',"end_year","2024")
    #終了月の入力
    input.inputName(driver,'Rep5Main',"end_month","12")
    
    # [出力]ボタンをクリック
    driver.find_element(By.XPATH,"/html/body/center/form/input[1]").click()



    # タブを閉じる
    driver.close()
    # WebDriverを終了する
    driver.quit()

if __name__ == "__main__":

    #スレッドの作成
    thread1 = threading.Thread(target=siteOperations)
    thread2 = threading.Thread(target=pushS)

    print("="*10,"スレッド1を開始","="*10)
    thread1.start()
    print("="*10,"スレッド2を開始","="*10)
    thread2.start()

    
    thread1.join()
    thread2.join()
    print("="*10,"スレッド終了","="*10)

from selenium import webdriver
from selenium.webdriver.common.keys import Keys
from selenium.webdriver.common.by import By
from selenium.webdriver.support.ui import WebDriverWait
from selenium.webdriver.support import expected_conditions as EC
import time


def buttonClickID(driver,FrameName,ID):
    #フレームの移動
    time.sleep(2)
    #親フレームに戻る
    driver.switch_to.parent_frame()
    driver.switch_to.frame(driver.find_element(By.NAME,FrameName))


    # ボタンのクリック
    form_button = WebDriverWait(driver, 10).until(
        EC.presence_of_element_located((By.ID,ID))
    )
    form_button.click()
    
def buttonClickName(driver,FrameName,Name):
    #フレームの移動
    time.sleep(2)
    #親フレームに戻る
    driver.switch_to.parent_frame()
    driver.switch_to.frame(driver.find_element(By.NAME,FrameName))


    # ボタンのクリック
    form_button = WebDriverWait(driver, 10).until(
        EC.presence_of_element_located((By.NAME,Name))
    )
    form_button.click()
    
def buttonClickType(driver,FrameName,Type,content):
    #フレームの移動
    time.sleep(2)
    #親フレームに戻る
    driver.switch_to.parent_frame()
    driver.switch_to.frame(driver.find_element(By.NAME,FrameName))


    # ボタンのクリック
    form_button = WebDriverWait(driver, 10).until(
         EC.presence_of_element_located((By.CSS_SELECTOR, 'input[type="' + Type + '"][value="' + content + '"]'))
                                       
    )
    form_button.click()

from selenium import webdriver
from selenium.webdriver.common.keys import Keys
from selenium.webdriver.common.by import By
from selenium.webdriver.support.ui import WebDriverWait
from selenium.webdriver.support import expected_conditions as EC
import time
from selenium.webdriver.common.keys import Keys


def inputID(driver,FrameName,ID,content):
    #フレームの移動
    time.sleep(2)
    #親フレームに戻る
    driver.switch_to.parent_frame()
    driver.switch_to.frame(driver.find_element(By.NAME,FrameName))

    # 入力内容の入力
    form_input = WebDriverWait(driver, 10).until(
        EC.presence_of_element_located((By.ID,ID))
    )
    form_input.send_keys(content)
    
def inputName(driver,FrameName,Name,content):
    #フレームの移動
    time.sleep(2)
    #親フレームに戻る
    driver.switch_to.parent_frame()
    driver.switch_to.frame(driver.find_element(By.NAME,FrameName))
    
    #入力内容あればクリアにする
    driver.find_element(By.NAME,Name).send_keys( Keys.CONTROL + "a" )
    driver.find_element(By.NAME,Name).send_keys( Keys.DELETE )
    
    #element = driver.find_element(By.NAME, Name)
    #element.clear()
    time.sleep(2)


    # 入力内容の入力
    form_input = WebDriverWait(driver, 10).until(
        EC.presence_of_element_located((By.NAME,Name))
    )
    form_input.send_keys(content)

試したこと・調べたこと

• teratailやGoogle等で検索した
• ソースコードを自分なりに変更した
• 知人に聞いた
• その他

上記の詳細・結果

キーボードから直接入力するようにしたのですが、効果がありませんでした。

補足

使用ツール
Python
Selenium
EdgeのIEモード

Answer 1

そのダイアログは、Windowsの機能が直接管理しているので、Seleniumで操作不可でしょうね。

IEは今使ってないのですが、設定画面のダウンロードオプション設定で確認ダイアログを出すかどうかのオプションがあるはずなので、それをオフにします。

案0：デフォルト設定？
IEは今使ってないので確認できませんが、もしかすると他のブラウザのようにプロファイル単位じゃなくて、ユーザー単位でその設定が効くなら（そのユーザーがSelenium経由で起動したIEにも効くなら）、あらかじめ設定を変更しておく。

なんとなくそれで行けそうな気がしますが、
Chrome等だと、Seleniumから起動すると通常と別のプロファイルが使われて、通常状態であらかじめ設定しても効かないです。もしIEもそれと同じようにSeleniumで効かない場合は、下記のいずれかで。

案1：半自動
driver = webdriver.Ie()の次に、input("ブラウザの設定画面でダウンロードの確認ダイアログを出さない設定に変更後、Enterを押して下さい")を入れて、そのように操作する。

案2：自動その1
driver = webdriver.Ie()の前に、そのような設定をします。
IEについては調べる気がしないので、Chromeの例を書いておきますので、それに該当するコードに変更して下さい。
IEでの方法が不明なら、案1で。

from selenium.webdriver.chrome.options import Options
～～～中略～～～
options = Options()
options.add_experimental_option("prefs",{
	"download.default_directory": r"Z:\TEMP",   #ダウンロード先を指定
	"download.prompt_for_download": False       #ダイアログを出さない
})
driver = webdriver.Chrome(options=options)

案3：自動その2
ChromeやFirefoxだと、Selenium経由でブラウザを起動する際に既存プロファイルを指定できます。
参考コードはググって下さい。このサイトでもChoromeについての質問と回答が何度か出ていますが、Seleniumのバージョンによって方法が違う可能性があり、バージョンが古いと使えないかもしれません。
これもIEの例が見つかるかどうか。

Comments

[PON.chan]

ご回答ありがとうございます。
別の方法を検討することになりました。