selenium python ウインドウの切り替えができない。

Question

以下のように株価のスクレイピングを行おうとしていますが、ウインドウの切り替えがうまくいきません。なぜでしょうか？ウインドウのデータは習得できているはずなのですが・・・。

よろしくお願いします。

以下エラーコード

　oSuchWindowException Traceback (most recent call last)
<ipython-input-131-fafd9a338816> in <module>()
----> 1 sikomi1(numbers)

<ipython-input-129-96a41ed9cde1> in sikomi1(numbers)
29 while num <len(numbers): #ブラウザ更新して、初値が付いたら
30 print(wh[num])
---> 31 wd.switch_to_window(wh[num])
32 wd.refresh()
33 sine[num] = wd.find_element_by_xpath("//div[@id='detail']/div[2]/div[2]/dl/dd/strong").text

~\AppData\Roaming\Python\Python36\site-packages\selenium\webdriver\remote\webdriver.py in switch_to_window(self, window_name)
777 """
778 warnings.warn("use driver.switch_to.window instead", DeprecationWarning)
--> 779 self._switch_to.window(window_name)
780
781 def switch_to_frame(self, frame_reference):

~\AppData\Roaming\Python\Python36\site-packages\selenium\webdriver\remote\switch_to.py in window(self, window_name)
113 return
114 data = {'name': window_name}
--> 115 self._driver.execute(Command.SWITCH_TO_WINDOW, data)
116
117 def _w3c_window(self, window_name):

~\AppData\Roaming\Python\Python36\site-packages\selenium\webdriver\remote\webdriver.py in execute(self, driver_command, params)
318 response = self.command_executor.execute(driver_command, params)
319 if response:
--> 320 self.error_handler.check_response(response)
321 response['value'] = self._unwrap_value(
322 response.get('value', None))

~\AppData\Roaming\Python\Python36\site-packages\selenium\webdriver\remote\errorhandler.py in check_response(self, response)
240 alert_text = value['alert'].get('text')
241 raise exception_class(message, screen, stacktrace, alert_text)
--> 242 raise exception_class(message, screen, stacktrace)
243
244 def _value_or_default(self, obj, key, default):

NoSuchWindowException: Message: no such window
(Session info: chrome=68.0.3440.106)
(Driver info: chromedriver=2.35.528161 (5b82f2d2aae0ca24b877009200ced9065a772e73),platform=Windows NT 10.0.17134 x86_64)

Message: no such window

と出てしまいます。

以下ソースコード

def sikomi1(numbers): 
    wh = [] #ウインドウ番号
    sikomi1_trigger = []
    sine,genzai,zenjitune = [],[],[]
    num = 0
    wd = web.Chrome()
    wait = wd.implicitly_wait(10) # ブラウザ起動
    
    while num < len(numbers): #個数分、ブラウザ起動
        wd.get("https://finance.yahoo.co.jp/")
        wd.find_element_by_name('query').click()
        wd.find_element_by_name("query").clear()
        wd.find_element_by_name("query").send_keys(numbers[num])
        wd.find_element_by_id("searchButton").click()

        sine.append(wd.find_element_by_xpath("//div[@id='detail']/div[2]/div[2]/dl/dd/strong").text)
        zenjitune.append(wd.find_element_by_xpath("//div[@id='detail']/div[2]/div/dl/dd/strong").text)
        num += 1
        wh.append(wd.current_window_handle) #ウィンドウ番号の習得
        if num == len(numbers):
            print(wh)
            break
        else:
            wd= web.Chrome()
        
    num = 0    
 
    while num <len(numbers): #ブラウザ更新して、初値が付いたら
        print(wh[num])
        **__wd.switch_to_window(wh[num])__**　　ここがおかしいはずですが・・
        wd.refresh()
        sine[num] = wd.find_element_by_xpath("//div[@id='detail']/div[2]/div[2]/dl/dd/strong").text
        zenjitune[num] = wd.find_element_by_xpath("//div[@id='detail']/div[2]/div/dl/dd/strong").text
        
        try:
            sine[num] = int(sine[num].replace(',',''))
            zenjitune[num] = int(zenjitune[num].replace(',',''))
            josyo[num] = sine[num]/zenjitune[num]*100-100
            print(josyo[num])
            num += 1
            wd.switch_to_window(wh[num])
            
        except:
            nun += 1
            wd.switch_to_window(wh[num])

実行結果

['CDwindow-8A8D9A9BE0F1B07B14027E7A1468EA5C', 'CDwindow-9D725EAE0F62DBD1390ACC33DB00C3D2']
CDwindow-8A8D9A9BE0F1B07B14027E7A1468EA5C

Answer 1

NoSuchWindowException: Message: no such window

グーグル翻訳
NoSuchWindowException：メッセージ：そのようなウィンドウはありません

wd= web.Chrome()

ループ内でChromeのインスタンスを上書きしていませんか。
wh = []と同様に複数保持するようにしてくださいな。

---

カウンタ変数を手動でインクリメント(加算)するのはバグの元なので、できるだけ避けてください。
カウンタ変数の値を正しく更新するのは、プログラマー側の責任になりそして人は容易に間違えます。
代替手段としてenumerateとrangeが使えます。
参考情報：Pythonのfor文によるループ処理（range, enumerate, zipなど）
この指摘をした理由は
質問文のソースコードより抜粋しますが、以下の部分は正しく実装されていないのではと思ったからです。

num = 0
while num <len(numbers):
   print(wh[num])
   wd.switch_to_window(wh[num])
   wd.refresh()
   try:
      # 中略
      num += 1
      wd.switch_to_window(wh[num])
   except:
      # 加算後にswitch_to_windowを行っているが、while ループの先頭でもswitch_to_windowを行っている。
      nun += 1 
      #この位置で例外発生時にwhileループが中断される。
      wd.switch_to_window(wh[num])
      # whileループにある、wd.refresh()が無いtryの中も同様

---

Pythonはインデントが重要な言語です。
質問文のソースコード部分を以下を参考に編集してくださいな。

wh = []
wh.append(wd.current_window_handle) #ウィンドウ番号の習得

---

whの複数保持の方法

質問者が該当のコードを記述しているのにその質問が来るのが少し謎ですが・・・
ウィンドウ番号を下記コードで複数保持しています。

wh = []
while num < len(numbers): #個数分、ブラウザ起動
      wh.append(wd.current_window_handle) #ウィンドウ番号の習得

よって同じように

wdl = []
while num < len(numbers): #個数分、ブラウザ起動
      wd = web.Chrome()
      # 中略
      wdl.append(wd)

回答した後に気づきましたが、yahooファイナンスはhttps://finance.yahoo.co.jp/　Yahoo!ファイナンスヘルプ規約によりスクレイピングを禁止しています。
という訳でこれ以上は回答できかねるので悪しからずご容赦くださいな。

Comments

[hikaa]

回答ありがとうございます。
質問以外のことも教えていただきありがとうございます。コードを整形しました。

「ループ内でChromeのインスタンスを上書きしていませんか。
wh = []と同様に複数保持するようにしてくださいな。」

のところをもう少し詳しく教えていただけないでしょうか。whの複数保持の方法がネットで探してみましたが分かりません・・。

[hikaa]

回答ありがとうございました。ウィンドウの切り替えができるようになりました！
スクレイピングは禁止なんですね・・・。別のサイトからデータは取ってくるようにします。
詳しく教えていただきありがとうございました。

[umyu]

@hikaaさんへ
解決できてよかったです。
日経平均株価の著作権は「日本経済新聞社」、TOPIXは「東京証券取引所」のように株価は著作権で保護されている事がありますその点もご注意を。あとスクレイピングはどうしても相手サーバーに負荷が掛かるので、株価のリアルタイムの取得は別口（有料）という事が多いです。