Q&A
同じコードで同じPCからでうまくいったのであれば、403は一時的なものだったと思われます。
実現したいこと
こちらのページから、HTMLを取得する
試したこと
Python
1import requests 2from bs4 import BeautifulSoup 3 4html_doc = requests.get("http://virtual-youtuber.userlocal.jp/document/ranking").text 5soup = BeautifulSoup(html_doc, 'html.parser') #Beautiful soupの初期化 6print(soup.prettify())
を実行したのですが
python
1<html> 2 <head> 3 <title> 4 403 Forbidden 5 </title> 6 </head> 7 <body bgcolor="white"> 8 <center> 9 <h1> 10 403 Forbidden 11 </h1> 12 </center> 13 <hr/> 14 <center> 15 nginx 16 </center> 17 </body> 18</html>
このような感じで、うまくいきません。
解決策、アドバイスよろしくお願いいたします。
回答3件
0
同じコードでそれなりのHTMLが取得できます。考えにくいですが、IPアドレスがアクセス禁止になっているとか？
同じOSからブラウザで同じURLにアクセスすると表示できますか？
投稿2019/11/12 08:43
総合スコア84505
0
google clabで実行する場合User-AgentをURLの後に入力する事でエラーを回避できるかもしれないです。
headers = {"User-Agent": "Mozilla/5.0 (X11; Linux x86_64; rv:61.0) Gecko/20100101 Firefox/61.0"}
投稿2019/12/26 21:19
総合スコア15
0
自己解決
VScodeで同じコードを作成保存。
windows powershellから実行したところうまくいきました。
回答くださった皆さんありがとうございました。
投稿2019/11/24 05:29
総合スコア32
Google colabolatoryの方だと相変わらず403が出るので、Google colabolatoryの方になにかしら原因があるのかと思います。
プログラムを自PC上で実行してたんじゃなくて、Googleサーバー上で実施していたということ？？
それは全然話が違います。
というか、「PCで実行」という意味が理解できていないということか。
あなたの回答
tips
プレビュー
バッドをするには、ログインかつ
こちらの条件を満たす必要があります。
2019/11/13 03:53
2019/11/23 07:35
2019/11/23 07:38
2019/11/24 05:24