pythonでスクレイピングの勉強するために
以下のコードを書きました。
classが"tk-pd-HeroTitle"のh1のテキストを取得するようにしたいのですが
"tk-pd-HeroTitle"がないページに移動した時に
エラーになってしまいます。
例外処理をしてみましたが駄目でした。
find.allで見つからなかった場合の処理はどのようにすればいいですか?
import requests from bs4 import BeautifulSoup # Webページを取得して解析する load_url = "https://takeda-kenko.jp/products/" html = requests.get(load_url) soup = BeautifulSoup(html.content, "html.parser") # classで検索し、その中のすべてのaタグを検索して表示する chap2 = soup.find_all(class_="tk-pi-LineupUnit_ListItem") for for_class in chap2: for element in for_class.find_all("a"): kusuri = 'https://takeda-kenko.jp' + element.get('href') tx = requests.get(kusuri) #薬のページに移動 soup2 = BeautifulSoup(tx.content, "html.parser") #ここでエラー try: chap3 = soup2.find_all(class_="tk-pd-HeroTitle") print(chap3) except: print("エラー")
#エラー内容
ConnectionError: HTTPSConnectionPool(host='takeda-kenko.jphttps', port=443): Max retries exceeded with url: //shop.takeda.co.jp/p/92901 (Caused by NewConnectionError('<urllib3.connection.VerifiedHTTPSConnection object at 0x00000258331DFC50>: Failed to establish a new connection: [Errno 11001] getaddrinfo failed'))
回答1件
あなたの回答
tips
プレビュー