python3でurllibとbeautifulsoupを使ってスクレイピングをしているのですが。
あるページにアクセスするときだけ
http.client.IncompleteRead: IncompleteRead(75971 bytes read, 29239 more expected)
というエラーが発生してしまいます。毎回発生するのではなく、うまくいくときもあるのですが、このエラーの原因がわかりません。
原因と解消方法を教えてください。
python
1from bs4 import BeautifulSoup 2import urllib.request 3 4 5url = 'ページのURL' 6req = urllib.request.Request(url, headers={'User-Agent': 'Mozilla/5.0'}) 7response = urllib.request.urlopen(req) 8html = response.read() 9soup = BeautifulSoup(html, "lxml")
回答2件
あなたの回答
tips
プレビュー
バッドをするには、ログインかつ
こちらの条件を満たす必要があります。