質問をすることでしか得られない、回答やアドバイスがある。

15分調べてもわからないことは、質問しよう!

新規登録して質問してみよう
ただいま回答率
85.48%
Google API

Googleは多種多様なAPIを提供していて、その多くはウェブ開発者向けのAPIです。それらのAPIは消費者に人気なGoogleのサービス(Google Maps, Google Earth, AdSense, Adwords, Google Apps,YouTube等)に基づいています。

Python

Pythonは、コードの読みやすさが特徴的なプログラミング言語の1つです。 強い型付け、動的型付けに対応しており、後方互換性がないバージョン2系とバージョン3系が使用されています。 商用製品の開発にも無料で使用でき、OSだけでなく仮想環境にも対応。Unicodeによる文字列操作をサポートしているため、日本語処理も標準で可能です。

Q&A

解決済

1回答

2069閲覧

pythonで、クエリ上限がないCustom Search Site Restricted JSON API を利用したい

mujimaru

総合スコア5

Google API

Googleは多種多様なAPIを提供していて、その多くはウェブ開発者向けのAPIです。それらのAPIは消費者に人気なGoogleのサービス(Google Maps, Google Earth, AdSense, Adwords, Google Apps,YouTube等)に基づいています。

Python

Pythonは、コードの読みやすさが特徴的なプログラミング言語の1つです。 強い型付け、動的型付けに対応しており、後方互換性がないバージョン2系とバージョン3系が使用されています。 商用製品の開発にも無料で使用でき、OSだけでなく仮想環境にも対応。Unicodeによる文字列操作をサポートしているため、日本語処理も標準で可能です。

0グッド

0クリップ

投稿2020/04/21 09:58

前提・実現したいこと

Pythonで、GoogleのAPIであるCustom Search Site Restricted JSON APIを利用するスクリプトを作成したいと考えています。しかし、このAPIには1日のクエリ上限が存在しないのにも関わらず、何らかの上限に引っかかりエラーが返ってきてしまいます。引っかかっている上限の内容、および改善方法などを指摘して頂けると助かります。

発生している問題・エラーメッセージ

"code": 403, "message": "Request throttled due to daily limit being reached.", "errors": [ { "message": "Request throttled due to daily limit being reached.", "domain": "usageLimits", "reason": "dailyLimitExceeded" } ], "status": "RESOURCE_EXHAUSTED"

該当のソースコード

python3

1# -*- coding: utf-8 -*- 2 3import os 4import datetime 5import json 6import sys 7import requests 8 9from urllib.parse import quote 10from time import sleep 11 12CUSTOM_SEARCH_URL = "https://www.googleapis.com/customsearch/v1/siterestrict?" 13 14 query = keyword+' after:'+day.strftime("%Y/%m/%d")+' before:'+nextday.strftime("%Y/%m/%d") 15 page_limit = 10 16 start_index = 1 17 response = [] 18 for n_page in range(0, page_limit): 19 try: 20 sleep(1) 21 22 #assemble queries 23 asquery = CUSTOM_SEARCH_URL + "key=" + GOOGLE_API_KEY + "&cx=" + CUSTOM_SEARCH_ENGINE_ID + "&num=10&start=" + str(start_index) + "&q=" + quote(query) 24 25 response_ele=requests.get(asquery) 26 response_ele= response_ele.json() 27 response.append(response_ele) 28 start_index = response_ele.get("queries").get("nextPage")[0].get("startIndex") 29 resuponse_ele = "" 30 except Exception as e: 31 print(e) 32 break 33/*この後responseをファイルに保存*/

試したこと

このスクリプトではクエリをプログラム中で作成し、requestsによってAPIを叩いていますが、ライブラリ[google-api-python-client]を利用したスクリプトでも同様の結果となりました。

気になる質問をクリップする

クリップした質問は、後からいつでもMYページで確認できます。

またクリップした質問に回答があった際、通知やメールを受け取ることができます。

バッドをするには、ログインかつ

こちらの条件を満たす必要があります。

guest

回答1

0

ベストアンサー

https://developers.google.com/custom-search/v1/site_restricted_api
このサイトにある通り、制限はありませんが有料になります。

おそらく、そのアカウントでの課金が有効になっていないのが原因と思います。
無料で使いたいのであれば、一日100回の無料枠の中で使うしかないかと。
課金しても構わないので、たくさん使いたい場合には、アカウントでの課金を有効にする必要があります。

投稿2020/04/21 12:38

編集2020/04/21 13:37
ozraru

総合スコア150

バッドをするには、ログインかつ

こちらの条件を満たす必要があります。

mujimaru

2020/04/21 13:27

回答ありがとうございます。 今回利用したいAPIはCustom Search APIではなくCustom Search Site Restricted JSON APIなのですが、そちらの場合でもCustom Search JSON APIの無料枠に縛られてしまうのでしょうか? 今回利用したいAPIのOverview↓ https://developers.google.com/custom-search/v1/site_restricted_api
ozraru

2020/04/21 13:32

課金は有効になっているんですか? 回答にも書いた通り、Site Restrictedの方も有料です。 課金が有効になっていないと有料サービスは使えないし、 そもそも無料枠が適用されないのなら、制限どころか1回も使えないと思います。
ozraru

2020/04/21 13:34

あれ、Site Restrictedの方のURLを貼ったつもりでしたが、間違えてましたか。 修正しておきます。
mujimaru

2020/04/21 13:50

回答の内容についての自分の理解が足りずお手数をおかけしました。追加でお答えいただいたおかげでエラー原因が判明しました。ありがとうございます。
guest

あなたの回答

tips

太字

斜体

打ち消し線

見出し

引用テキストの挿入

コードの挿入

リンクの挿入

リストの挿入

番号リストの挿入

表の挿入

水平線の挿入

プレビュー

15分調べてもわからないことは
teratailで質問しよう!

ただいまの回答率
85.48%

質問をまとめることで
思考を整理して素早く解決

テンプレート機能で
簡単に質問をまとめる

質問する

関連した質問