食べログの店舗一覧ページから、各店舗のURLを自動取得してそれぞれ解析したい

Question

前提・実現したいこと

当方、プログラミング初心者です。

飲み会でビールの銘柄を指定されることが多いのですが、
食べログではビールの銘柄での絞り込みができません。

そこで、食べログをスクレイピングして、店舗一覧ページ（エリアで絞り込み後）の中から、
店舗説明テキスト内に希望のビール銘柄が含まれている店舗を抽出し、
店名と評価を表示するプログラムを組みたいと考えております。

該当のソースコード

※途中まで作成したものです↓

import requests
from bs4 import BeautifulSoup

#店舗一覧ページに対するBeautifulSoupの設定
list_url = 'https://tabelog.com/tokyo/A1302/'
r_list = requests.get(list_url)
html_list = r_list.content
soup_list = BeautifulSoup(html_list, "html.parser")

#店舗一覧ページ内のURLリンクの抽出
for aa in soup_list.find_all("a"):
    link = aa.get("href")
    name = aa.get_text()
    print(link,"\t",name)


#個別店舗ページに対するBeautifulSoupの設定
target_url = 'https://tabelog.com/tokyo/A1312/A131201/13234764/dtlmenu/drink/'
r = requests.get(target_url)
html = r.content
soup = BeautifulSoup(html, "html.parser")

#個別店舗の店名を抽出
store_name = soup.find(class_="display-name").text
#print(store_name)

#個別店舗の評価を抽出
rating_score_tag = soup.find('b', class_='c-rating__val')
rating_score = rating_score_tag.span.string

#個別店舗ページ内のテキストを全取得
all_text=soup.find(all).text

#テキスト内に希望ビール銘柄が含まれていたら店名と評価を表示する
if "アサヒ" in all_text:
    print(store_name+rating_score)

できていること

・店舗一覧ページ内に記載のあるURLを抽出すること
・個別店舗ページ内のテキストにビール銘柄が含まれていたら店名と評価を表示すること**

###できていないこと
①店舗一覧ページに記載のあるURLすべてを抽出してしまっている
→個別店舗のリンクURLのみを抽出したいができていない

②上記①で個別店舗のリンクURLのみを抽出できたとして、リスト化の仕方がわからない

③上記②のリストから順番にtarget_urlに代入を繰り返す処理をしたいができていない

###つまづいているポイント

①については、個別店舗URLは下記のようなクラス設定がされているため、
find_allの際にクラス指定をすればよいのかと思ったが、やり方がわからない。

<a class="list-rst__rst-name-target cpy-rst-name js-ranking-num" target="_blank" data-list-dest="item_top" data-ranking="1" href="https://tabelog.com/tokyo/A1302/A130204/13018162/">日本橋蛎殻町 すぎた</a>

③については、コードの"#個別店舗ページに対するBeautifulSoupの設定"以下を

def check(target_url):
#個別店舗ページに対するBeautifulSoupの設定
target_url = 'https://tabelog.com/tokyo/A1312/A131201/13234764/dtlmenu/drink/'
r = requests.get(target_url)
html = r.content
soup = BeautifulSoup(html, "html.parser")
#個別店舗の店名を抽出
store_name = soup.find(class_="display-name").text
#print(store_name)
#個別店舗の評価を抽出
rating_score_tag = soup.find('b', class_='c-rating__val')
rating_score = rating_score_tag.span.string
#個別店舗ページ内のテキストを全取得
all_text=soup.find(all).text
#テキスト内に希望ビール銘柄が含まれていたら店名と評価を表示する
if "アサヒ" in all_text:
    print(store_name+rating_score)

などとして関数化し、for文でtarget_urlにリストから順番にURLを代入させる？
というような方法でしょうか？イメージがついておりません。

コメントを下さった方、ありがとうございます。
自分なりに改めて考えて追記致しました。
Markdown記法についてはわかっていない部分が多く申し訳ございません。

不足している情報などございましたらご指摘頂けましたら幸いです。
宜しくお願い致します。

###（追記）修正したプログラム

ご回答ありがとうございます。
頂いたアドバイスを参考に下記の通り修正したところ、うまく動きました。

import requests
from bs4 import BeautifulSoup
import sys

#ページネーション（次の20件）を変数 i で表現。今回は10ページ目まで取得している
#i は数値（int）のため、URLに入れ込む際には文字列（str)に変換している
#rangeは通常0から始まるするため、引数として1を追加して、1から始まるようにしている
for i in range(1, 10):
    #URLの"A1302"は「東京・日本橋」のディレクトリのため、他のエリアの場合は手打ちで変更必要
    list_url = "https://tabelog.com/tokyo/A1302/rstLst/"+str(i)+"/?Srt=D&SrtT=rt&sort_mode=1"

    #店舗一覧ページに対するBeautifulSoupの設定
    r_list = requests.get(list_url)
    html_list = r_list.content
    soup_list = BeautifulSoup(html_list, "html.parser")

    #店舗一覧ページ内の個別店舗ページURLの抽出
    stores = soup_list.find_all(class_="list-rst__rst-name-target")
    storeURLs = [ x['href'] for x in stores ]

    #個別店舗のドリンクメニューページを集めたリストを作成
    #個別店舗ページURLの末尾にドリンクメニューのディレクトリを追記したものをリストへ追加
    drinkURLs = []
    for storeURL in storeURLs:
        drinkURL = storeURL +"dtlmenu/drink/"
        drinkURLs.append(drinkURL)

    #各店舗のドリンクメニューページに希望のビール銘柄の記載があるか、リスト内URLを順番に確認
    for target_url in drinkURLs:
        
        #個別店舗ドリンクページに対するBeautifulSoupの設定
        r = requests.get(target_url)
        html = r.content
        soup = BeautifulSoup(html, "html.parser")

        #個別店舗の店名を抽出
        store_name = soup.find(class_="display-name").text

        #個別店舗の評価を抽出
        rating_score_tag = soup.find('b', class_='c-rating__val')
        rating_score = rating_score_tag.span.string
        
        #個別店舗ドリンクページ内のテキストを全取得
        all_text=soup.find(all).text
        
        #テキスト内に希望ビール銘柄の記載があれば、店名と評価を表示する
        #記載がなければ、その旨を表示する
        if "キリン" in all_text:
            print(store_name+rating_score)
        else:
            print(store_name+"キリンは置いていません")

Comments

[Lhankor_Mhy]

エラーメッセージや実行ログをコピー&ペーストしましょう
https://teratail.com/help/question-tips#questionTips3-4-2

Markdownを利用しましょう
https://teratail.com/help/question-tips#questionTips3-7

[Lhankor_Mhy]

①https://tabelog.com/tokyo/A1302/のレスポンスを取る
②店舗ページのリンクを抜き出してリストに納める。
③②のリストからループを回してデータを抜き出す。

で、いいと思いますが、具体的にどの部分がわからないのか示せますか？

[Y.H.]

「※途中まで作成したものです」に記載されているコードでは、やりたいことの、
・なにができているのか
・何ができていないのか
・何が問題なのか（何につまづいているのか）
を追記ください。

Answer 1

①については、個別店舗URLは下記のようなクラス設定がされているため、find_allの際にクラス指定をすればよいのかと思ったが、やり方がわからない。

find_allの際にクラス指定をすればよい

まさにそのとおりです。

stores = soup.find_all(class_="list-rst__rst-name-target")

②上記①で個別店舗のリンクURLのみを抽出できたとして、リスト化の仕方がわからない

内包表記を使えばいいかと思います。

storeURLs = [ x['href'] for x in stores ]

③...for文でtarget_urlにリストから順番にURLを代入させる？というような方法でしょうか？

まさにそのとおりです。

for target_url in storeURLs:

Comments

[s61september]

ありがとうございます。おかげさまでうまく動きました。
内包表記は初めて知りました。
x['href']で、storesに含まれるリンクURL箇所のみを抜粋してリストに追加することができるのですね。
大変勉強になりました。ありがとうございます。

[Lhankor_Mhy]

ご解決されて何よりです。