seleniumによるスクレイピングで次ページへのリンクがなくなるまで繰り返し処理をしたい

Question

seleniumによるスクレイピングで次ページへのリンクがなくなるまで繰り返し処理をしたい

seleniumでスクレイピングの練習をしていて
⓵最初のページのページ内の表を取得してpandasに追加
⓶次のページの表記『NEXT』がある場合は次ページをクリックしてページ内の表を取得してpandasに追加
⓷次のページの表記『NEXT』がない場合は処理を終了

発生している問題・エラーメッセージ

上記の繰り返し文をwhileで書こうとしているのですが
色々試して上手くいきません。
現在のコードでは以下のエラーが発生してしまいます。
TypeError: catching classes that do not inherit from BaseException is not allowed

該当のソースコード

import selenium
import time
from selenium import webdriver
browser = webdriver.Chrome()
browser.get('https://www.suishinkikou.or.jp/areaShopList.php?search_word=&ken=156&area=52&syll=&city=%B7%B4%BB%B3%BB%D4&page=1')
time.sleep(5)
import pandas as pd
dfs = pd.DataFrame(columns=['ホール名', '所在地'])

#表・htmlのtable取得
url = browser.current_url
data = pd.read_html(url, header = 0)
data[1]
df = pd.DataFrame(data[1]) 
dfs = dfs.append(df, ignore_index=True)
dfs

nextpage = browser.find_element_by_xpath('//*[@id="rightcontent"]/section/article[2]/div/p/a[3]')
while True:
    try:
        nextpage.click()
        time.sleep(5)
        url = browser.current_url
        data = pd.read_html(url, header = 0)
        data[1]
        df = pd.DataFrame(data[1]) 
        dfs = dfs.append(df, ignore_index=True)
        dfs
    except nextpage == False:
        break
dfs

試したこと

ここに問題に対して試したことを記載してください。

補足情報（FW/ツールのバージョンなど）

ここにより詳細な情報を記載してください。

Comments

[t_obara]

問題点としては、
except の使い方がおかしい。次の要素を取得する部分がない。
です。

[thinkthink]

コメントありがとうございます。
exceptの使い方を調べてみます。

Answer 1

おおよそこんなところじゃないでしょうか。

from time import sleep
from selenium import webdriver
import pandas as pd
from selenium.common.exceptions import NoSuchElementException

browser = webdriver.Chrome()
browser.get('https://www.suishinkikou.or.jp/areaShopList.php?search_word=&ken=156&area=52&syll=&city=%B7%B4%BB%B3%BB%D4&page=1')
sleep(5)

dfs = pd.DataFrame(columns=['ホール名', '所在地'])

while True:
        url = browser.current_url
        data = pd.read_html(url, header = 0)
        data[1]
        df = pd.DataFrame(data[1]) 
        dfs = dfs.append(df, ignore_index=True)
        dfs
    try:
        browser.find_element_by_link_text('[ NEXT ]').click()
        sleep(5)
    except NoSuchElementException:
        browser.quit()
        break
dfs

Comments

[thinkthink]

ご回答ありがとうございます。
頂いたコードでやりたかった事が実現できました。
また、頂いたコードのfrom selenium.common.exceptions import NoSuchElementExceptionでググってみたら、今まで辿り着けなかった記事も見つかり、理解が深まりました。
本当に助かりました。ありがとうございました。

Answer 2

google翻訳
TypeError: BaseExceptionを継承しないクラスをキャッチすることはできません

except nextpage == False:

これはなにを意図してこうしてるんでしょうか

Comments

[thinkthink]

コメントありがとうございます。
except nextpage == False：は
次のページへ遷移する[ NEXT ]のxpath
xpath('//*[@id="rightcontent"]/section/article[2]/div/p/a[3]')
が無くなったら＝最終ページなら
処理を抜ける処理にしたくて書きました。
色々ググってみて、同じようなことをしているコードを参考にしました。
正しくはどう書くべきなのか、色々検索して試しましたが辿り着きません。
ご教授いただければ幸いです。宜しくお願いいたします。

[y_waiwai]

https://docs.python.org/ja/3/library/exceptions.html

except には、捕捉する例外の型を置きます
そうなってないためにそのエラーが出てます

[thinkthink]

ご回答ありがとうございます。
exceptの書き方を調べてみます。