スクレイピング実行時に「HTTP Error 403: Forbidden」のエラーが発生する

Question

スクレイピングで画像を取得する処理を作成しています。
環境は以下です。
・OS：Windows 10(64bit)
・Python:ver 3.7.4

この環境で、下記のコードを作成しました。

import urllib.request

 # 保存先のファイル名
outpath = 'test.jpg'

headers = {
    "User-Agent": "Mozilla/5.0 (X11; Ubuntu; Linux x86_64; rv:47.0) Gecko/20100101 Firefox/47.0"
    }

imgSrc = 'http://www.getchu.com/brandnew/762170/c762170chara1.jpg'
target = urllib.request.Request(url=imgSrc, headers=headers)

reqTemp = urllib.request.urlopen(target)
reqData = reqTemp.read()

try:
    with open(outpath, 'wb') as f:
        f.write(reqData)
        print("Sccess to save:" + outpath)
except Exception as e:
    print("Failed to save:" + outpath)

上記コードを実行すると、urllib.request.urlopen関数を呼び出す場所で、「HTTP Error 403: Forbidden」のエラーが発生します。
こちらのサイトを参考にUser-AgentをFirefoxに書き換えたのですが、エラーは解消されませんでした。
原因、及び解決方法が分かる方がおられましたら、宜しくお願い致します。

Answer 1

商用サイトが対象であることを考えると、forbiddenが表示された以上、スクレイピングはあきらめたほうがいいと思います。仮に回避策があったとしても対策が取られるでしょうし、最悪の場合、訴えられることも覚悟する必要があります。
一般的に、画像などの使用を公式に認めているサイトであれば、APIが用意されています。一度確認してはいかがでしょうか

Comments

[TOMO6181]

御回答ありがとうございます。
APIがない場合は、スクレイピングはあきらめた方が良いのですね。