質問をすることでしか得られない、回答やアドバイスがある。

15分調べてもわからないことは、質問しよう!

新規登録して質問してみよう
ただいま回答率
86.12%
Python 3.x

Python 3はPythonプログラミング言語の最新バージョンであり、2008年12月3日にリリースされました。

解決済

python google検索スクレイピングが途中で止まる

退会済みユーザー

退会済みユーザー

総合スコア0

Python 3.x

Python 3はPythonプログラミング言語の最新バージョンであり、2008年12月3日にリリースされました。

2回答

0グッド

0クリップ

214閲覧

投稿2022/11/11 06:31

編集2022/11/11 06:35

前提

python+excel&xlwingでgoogle検索のスクレイピングを作っています、エクセル側A2セルに行数の値とA列に1行置きに検索キーワードが入っておりある程度のところまでできました。実際に動かすとforの9回目で止まってしまいます。

実現したいこと

ここに実現したいことを箇条書きで書いてください。

  • ▲▲機能を動作するようにする

発生している問題・エラーメッセージ

エラーメッセージ File "I:\python\gjk03.py", line 35, in WindowMain ans=(site_list[i]) IndexError: list index out of range ### 該当のソースコードのいち部分です kw_list = [sht.cells(i*2+1, 1).value for i in range(count)] print('作業行数:', count) for i in range(len(kw_list)): #i=0 #while(i < count): print(i) print(kw_list[i]) surl = "https://www.google.co.jp/search?q=" + kw_list[i] request = requests.get(surl) #time.sleep(1) soup = BeautifulSoup(request.text, "html.parser") #soup=soup.findAll("a") site_list=soup.select('div.kCrYT > a') ans=(site_list[i]) ans=str(ans)   以下略~

以下のような質問にはグッドを送りましょう

  • 質問内容が明確
  • 自分も答えを知りたい
  • 質問者以外のユーザにも役立つ

グッドが多くついた質問は、TOPページの「注目」タブのフィードに表示されやすくなります。

気になる質問をクリップする

クリップした質問は、後からいつでもマイページで確認できます。

またクリップした質問に回答があった際、通知やメールを受け取ることができます。

下記のような質問は推奨されていません。

  • 間違っている
  • 質問になっていない投稿
  • スパムや攻撃的な表現を用いた投稿

適切な質問に修正を依頼しましょう。

退会済みユーザー

退会済みユーザー

2022/11/11 09:19

質問者です、原因と回避方法が知りたいです。どなたか教えてください。 コードわかりにくかったりコピペ用に、全文アップします、お知らせ下さい。

回答2

1

そもそも論として、Googleの検索結果をスクレイピングすべきではありません。

Google の利用規約では、自動化されたクエリはその種類にかかわらず、Google からの明示的な許可を事前に得ることなく Google のシステムに送信することが禁止されています。(Google検索セントラルより)

ルール違反のアクセスに対してGoogle側が機械的にブロックを行ったり、Googleアカウントに対して何かしらの制裁が加えられたりしたとしても文句は言えません。

投稿2022/11/11 08:55

maisumakun

総合スコア141354

meg_👍を押しています

良いと思った回答にはグッドを送りましょう。
グッドが多くついた回答ほどページの上位に表示されるので、他の人が素晴らしい回答を見つけやすくなります。

下記のような回答は推奨されていません。

  • 間違っている回答
  • 質問の回答になっていない投稿
  • スパムや攻撃的な表現を用いた投稿

このような回答には修正を依頼しましょう。

0

ベストアンサー

質問しようか迷っていた問題でした。それほど必要性もないのでしばらく待って質問を閉じようと思います。ただ、原因は知りたいです。

投稿2022/11/11 09:26

退会済みユーザー

退会済みユーザー

総合スコア0

良いと思った回答にはグッドを送りましょう。
グッドが多くついた回答ほどページの上位に表示されるので、他の人が素晴らしい回答を見つけやすくなります。

下記のような回答は推奨されていません。

  • 間違っている回答
  • 質問の回答になっていない投稿
  • スパムや攻撃的な表現を用いた投稿

このような回答には修正を依頼しましょう。

2022/11/11 10:37

こちらの回答が他のユーザーから「質問に対する回答となっていない投稿」という指摘を受けました。

15分調べてもわからないことは
teratailで質問しよう!

ただいまの回答率
86.12%

質問をまとめることで
思考を整理して素早く解決

テンプレート機能で
簡単に質問をまとめる

質問する

関連した質問

同じタグがついた質問を見る

Python 3.x

Python 3はPythonプログラミング言語の最新バージョンであり、2008年12月3日にリリースされました。