Python3のurllibについて

Question

Python3のurllibモジュールを使って、LAST FMのAPIからカバーアート用の画像を取得するスクリプトを書いています。
（Tornadoを使ったMPDのWebクライアントを作成しており、上記はMPDクラスのメソッドです）
ただ、処理が非常に遅く、なんとか高速に取得できないか四苦八苦しており、お知恵を拝借できればと思い、質問させていただきます。

*** 以下のメソッドは別のメソッドから呼ばれます

	def _getCoverArt(self, artist, album):
		start = time.time()
		encArtist = urllib.request.quote(artist)
		encAlbum = urllib.request.quote(album)
		url = self.LAST_FM_API + '&artist=' + encArtist + '&album=' + encAlbum + '&format=json'
		site = urllib.request.urlopen(url).read()
		jsonData = json.loads(site.decode('utf8'))
		coverArtUrl = jsonData['album']['image'][3]['#text']
		elapsed = time.time() - start
		print("elapsed_time:{0}".format(elapsed) + '[sec]')
		return coverArtUrl

*** 実行結果（複数回試行）

• elapsed_time:3.3149170875549316[sec]
• elapsed_time:3.659274101257324[sec]
• elapsed_time:3.333353042602539[sec]

上記コード中のelapsed = time.time() - startをsite = urllib.request.urlopen(url).read()の前に持って行くと0.0001秒程度と出力されるので、ボトルネックはsite = urllib.request.urlopen(url).read()の部分だと思うのですが、いろいろ調べてみてもこの方法以外が検討もつきません。。。

何か解決策がございましたらご教示頂けますと幸いです。

Answer 1

お邪魔します。

pythonのurllibの影響なのでしょうか？インターネット上のWebAPIの結果を取得する処理ですよね。
APIに取得するデータの検索をより絞り込むために条件を追加するとか(limit=3とかにしてみる)そういうことは試してみましたか？
他に原因になりそうなことは、ネットワークの回線が遅いとか、そもそもlastFMのAPIがたまたま負荷が高い状態で結果を返すのが遅いとか、実行している環境のネットワークの設定がプロキシサーバ経由で遅いとか、色々状況はあると思いますが。

まず実行しているAPIをブラウザで叩いてみるとか、実行しているPCなりサーバなりを変えて動かしてみるとかして状況を見てみてはいかがでしょうか。
そもそもlastFMのほうで結果を返すのが遅い場合、早く結果が返って来るように条件を変えるとかぐらいしかできることはないと思いますが。。。

以上、参考まで。

Answer 2

start = time.time() を site = urllib.request.urlopen(url).read() の後に持ってきて場合も elapse_time が小さいのであれば、ボトルネックはsite = urllib.request.urlopen(url).read()の部分がボトルネックです。

readするデータが大きいのであれば、圧縮してみてはどうでしょうか。
Dive Into Python 3 14.2.4. 圧縮