HTTPレスポンスエラー403を回避したい

Question

pythonを用いてのスクレイピングを行なっています。
EtherscanというサイトのAPIを用いてオペコードを取得していました。

r = requests.get("https://etherscan.io/api?module=opcode&action=getopcode&address=0xc38DA2f95A183a5aBE1aC3e9fc2FDce8a4A1A045")
req = urllib.request.Request(url, headers={'User-Agent': 'Mozilla/5.0'})
print(r)

2日前まではこれでうまく情報を取得できていたのですが、今日再び実行したところ、以下のようなエラーが出てしまいました。

<Response [403]>

ブラウザ上でURLを直接入力すればうまく取得できるのですが、pythonで実行した時はエラーが出てしまいます。
うまく回避できる方法はないでしょうか？
ご回答よろしくお願いします。

Comments

[nandymak]

スクレイピングされないようにサイト側が対応したのでは？

[pdaocmhii]

色々確認してみた結果、そのようでした。

Answer 1

開発者用のAPIがあるようなので、利用方法を確認したほうがいいでしょう。
API-keyが必要とかリクエスト回数の制約などで引っかかっている気がします。

＜参考url＞
https://etherscan.io/apis

Answer 2

サイト側でスクレイピングの対策をされてしまったみたいでした。