python googleからスクレイピングしても結果が出力されません。なぜでしょうか

Question

質問内容

Python初心者で、参考図書を使って学んでおり、クラス内関数を用いて、スクレイピングを行っています。
下記のソースコードを実行しましたが、結果が出力されませんでした。
別のURLを用いた際には、結果が出力されました（下記の試したこと）。

googleを引数にしてスクレピングできるようにしたいのと、
原因を知りたいです。

ご回答・ご協力のほどよろしくお願いします。

参考図書：独学プログラマー Python言語の基本から仕事のやり方まで 　コーリー・アルソフ 清水川貴之

ソースコード

import urllib.request
from bs4 import BeautifulSoup

class Scraper:
    def __init__(self, site):
        self.site = site

    def scrape(self):
        r = urllib.request.urlopen(self.site)
        html = r.read() 
        parser = "html.parser" 
        sp = BeautifulSoup(html, parser) 
        for tag in sp.find_all("a"): 
            url = tag.get("href") 
            if url is None: 
                continue 
            if "html" in url: 
                print ("\n" + url)  

news = "https://news.google.com/"
Scraper(news).scrape() 

試したこと

"https://news.google.com/"を
"https://www.yahoo.co.jp/"に変えて実行

下の結果が出力されました。

https://about.yahoo.co.jp/docs/pr/disclaimer.html

補足情報（FW/ツールのバージョンなど）

windows10
Python3.7

Comments

[meg_]

そのサイトはスクレイピングしても良いサイトでしょうか？　禁止されている場合アクセス拒否されている可能性もあるかと思います。

[syarobura]

スクレイピング等に制限があるんですね。
調べてみたらgoogleのサイトはスクレイピングが禁止されているようでした。
ありがとうございます。

Answer 1

print(url) を入れて実行してみましたけど、htmlを含む行がありませんでしたよ。

Comments

[syarobura]

確認していただきありがとうございます。
詳しいことはよくわかりませんが、googleのサイトがスクレイピングに対して
制限をかけているようでした。