Pythonのスクレイピングでページ内の特定のテキストを含むurlをリストで取得したい

Question

厚生労働省の下記のページ↓から
https://www.mhlw.go.jp/stf/seisakunitsuite/bunya/topics_shingata_09444.html

新型コロナを含むaタグのurlを取得しようとしています。

from urllib import request
from bs4 import BeautifulSoup
import re
    
url = "https://www.mhlw.go.jp/stf/seisakunitsuite/bunya/topics_shingata_09444.html"

#get html
html = request.urlopen(url)

#set BueatifulSoup
soup = BeautifulSoup(html, "html.parser")
soup

links = [url.get('href') for url in soup.find_all('a', text=re.compile('新型コロナ'))]                                                            
links

実行結果

['/stf/seisakunitsuite/bunya/0000164708_00001.html']

上記のように実行しているのですが、実行結果のようになぜか一番上のurlしか取得できません。

どのように修正すれば新型コロナのテキストを含むurlを全て取得できるでしょうか？

追記

text=　だと aタグのインラインに該当のテキストがあるものしかダメなので、
下記のようにlambda式を使う方法で修正したら無事に動きました。

from urllib import request
from bs4 import BeautifulSoup
import re
    
url = "https://www.mhlw.go.jp/stf/seisakunitsuite/bunya/topics_shingata_09444.html"

#get html
html = request.urlopen(url)

#set BueatifulSoup
soup = BeautifulSoup(html, "html.parser")

links = [url.get('href') for url in soup.find_all(name=lambda x: x.name=="a" and "新型コロナ" in x.text)]                                                            
links

参考URL
https://qiita.com/amuyikam/items/b7acf88abb7512d58ed8

Answer 1

aタグの直下にそういうテキストが無いからですね。text=は直下(.string)しか見ないようです。
関数を使って、.stringではなく.textを見るようにします。

soup.find_all(name=lambda x: x.name=="a" and "新型コロナ" in x.text)

Comments

[退会済みユーザー]

大変ご丁寧にありがとうございます。
こちらの関数初めて知ることができました。
無事動きました。ありがとうございました。