Googleの検索結果をスクレイピング出来ない

Question

前提・実現したいこと

Google検索の結果をスクレイピングしたいです。
タイトルは取得出来たのですが、そのサイトのURLが取得出来ません。

■■な機能を実装中に以下のエラーメッセージが発生しました。
requestsとBeautiful Soup4で、Googleの検索結果をスクレイピングしようと思ったんですが、調べて出てきたsoup.select('.r > a')を実行してみても、空のList型のみしか出力されません。

試したこと

ChromeとFirefoxの開発ツールで、classなどをコピペしてみたり、調べて出てきたコードを貼ってみたりしたのですが、出来ませんでした。

補足情報（FW/ツールのバージョンなど）

Python3.8
Beautiful Soup 4
requests

Answer 1

技術的な話以前の問題として、Googleはスクレイピングによる検索結果の取得を認めていません。

Google の利用規約では、自動化されたクエリはその種類にかかわらず、Google からの明示的な許可を事前に得ることなく Google のシステムに送信することが禁止されています。（中略）ランキングの確認だけでなく、許可を得ていない他の種類の Google への自動アクセスも、ウェブマスター向けガイドラインと利用規約で違反と見なされます。（Search Consoleヘルプより）