google検索での検索結果がスクレイピング（タイトル名の抜き出し）できません…。

Question

言語：Python3
OS：MacOS BigSur11.2.1

[やりたいこと]

　遠隔でSafariを操作。
「スクレイピング」と検索した結果をスクレイピングし、タイトル名を抜き出したい。

[困っていること]

以下に載せるコードを実行したところ、エラーなく終了した。
自動で検索することができウインドウも閉じたが、スクレイピングのみできなかった(タイトル名が抜き出せなかった)。
抜き出し部分のミスというより、何も抜き出せていない状態。

エラーが出ないのでどこを治して良いのかがわからず、迷走中…。
どなたかわかる方がいれば教えてくれませんか？

以下に説明の画像とコードを載せておきます。

from selenium import webdriver
from bs4 import BeautifulSoup
import time


#検索用語
url = 'https://www.google.com'
keyword = 'スクレイピング'

#WebDriver
driver = webdriver.Safari()
driver.get(url)
time.sleep(3)

#遠隔で入力、検索
search = driver.find_element_by_name('q')
search.send_keys(keyword)
search.submit()

#スクレイピング
soup = BeautifulSoup(driver.page_source, 'html.parser')
results = soup.find_all('h3', attrs={'class': 'LC201b'})

for result in results:
    print(result.get_text())

#ブラウザを閉じる
time.sleep(5)
driver.quit()

Comments

[meg_]

Google 検索結果ページやその他の Google のプロパティをスクレイピングすることはできません。(https://support.google.com/adspolicy/answer/6169371?hl=ja)とありますが確認されていますでしょうか？

[退会済みユーザー]

ご回答ありがとうございます。

こちらのコードはある書籍のものなのですが、書籍内では問題なくできていたようでしたので
詳細を確認していませんでした。
スクレイピングは非常にデリケートな問題を含むので、これからは十分注意して
勉強したいと思います。ありがとうございました。

Answer 1

meg_様より

Google 検索結果ページやその他の Google のプロパティをスクレイピングすることはできません。(https://support.google.com/adspolicy/answer/6169371?hl=ja)とありますが確認されていますでしょうか？

Googleの検索結果のページはそもそもスクレイピングができないようです。
詳細は上記URLにて説明されています。