urllib.requestでURL情報を取得できないときの回避策について

Question

urllib.requestでURL情報を取得できないときの回避策について質問させてください

短縮URLを展開するプログラムを作って運用しています。
大量のリストがあり、forで回している状況です。

先日
"https://t.co/U1QHEjDRhc"
を展開した時に返答がなくプログラムが固まってしまいました。

このURLはブラウザで展開すると
https://asia.playstation.com/
にたどり着き、その前に
http://PlayStation.Blog
を経由しているようです。

おそらくブラウザの言語や地域情報を得て、それぞれの国や地域へ
リダイレクトしていると思うのですが

1. これを日本でブラウザで入力した時と同じ様にURLの展開が可能なのでしょうか。
2. 難しい場合、例えば10秒以上プログラムが戻ってこない場合、エラーを発生させ次のリストへ移動するのようにすることはできるのでしょうか。

どうぞよろしくお願いします。

import urllib.request

url="https://t.co/U1QHEjDRhc"
urllist = (urllib.request.urlopen(url).geturl())
print(urllist)

Answer 1

timeoutを指定できます。

urllib.request

任意引数 timeout には接続開始などのブロックする操作におけるタイムアウト時間を秒数で指定します (指定されなかった場合、グローバルのデフォルトタイムアウト時間が利用されます)。この引数は、 HTTP, HTTPS, FTP 接続でのみ有効です。

import urllib.request
import socket
urls = ['http://www.google.co.jp','https://t.co/U1QHEjDRhc']
for url in urls:
    print(url)
    try:
        urllist = (urllib.request.urlopen(url,timeout=3).geturl())
        print(urllist)
    except socket.timeout:
        print('timeout')

Comments

[espresso34]

ありがとうございました。引数があったのですね。ちゃんとチュートリアルをよまないといけませんね。