Python3 スクレイピングの際、抽出できない部分への対応について

Question

こんにちは
スクレイピング初心者です。

スクレイピングを行った際、
タグを指定しても抽出されません。
表示されるにはどのようにしたら良いか教えて欲しいです。

▮対象となるURLのタグ名の前後の部分は、以下のようになっています。

<td class="alfa__item"> ①必要な内容はここに記載 ②何かあれば連絡を下さい </td>

※「alfa」「①」「②」の部分はそのまま書かない方が良いと思われるため置き換え

▮コード
import requests
from bs4 import BeautifulSoup

load_url = "対象となるHPのURL"
html = requests.get(load_url)
soup = BeautifulSoup(html.content, "html.parser")
print(soup.prettify())

print(soup.find("td").text)

▮結果
①②は表示されず、その続きのデータが表示されました

…
①②の項目は見たところ選択式となっているようにも思えます。
その場合スクレイピングはできないのでしょうか。

ご教示頂けますとありがたいです。
よろしくお願いします。

Comments

[otn]

できます。
コードを載せましょう。
あと、実行結果。

[tanatomo]

ありがとうございます！
載せても大丈夫と思われる範囲で、
更新しました。

Answer 1

ありがとうございました。最終的にallですべての「td」を表示したあと、”欲しいのは何番目のtdなのか”を数えて以下のコードを作成、求める文言を拾うことができました。

print(soup.find_all("td",class_="alfa__item")[6].text)

あとは、他の類似ページにも同じコードを適用できれば一歩前進。
類似ページを順番に辿って、該当の箇所の文言を拾い集めることができれば完璧です。

ご対応ありがとうございました。
おかげさまで理解が深まりました。

Answer 2

<td class="alfa__item">
①必要な内容はここに記載
②何かあれば連絡を下さい
</td> 

は、print(soup.prettify())の表示結果に含まれていますか？
含まれているなら、soup.find("td").textだと複数tdがあるなかの1つめのtdを取得するので、欲しいものは2つめ以降にあるのでしょう。
soup.find_allで全て取得して、それぞれの要素のtextを見ましょう。

①②の項目は見たところ選択式となっているようにも思えます。

の「選択式」とは、具体的にどういうことでしょう？

Comments

[tanatomo]

ありがとうございます。
確認してみたところ、最初に表示されたものは仰るように「１つ目のtd」でした。
抽出したい「td」は、十数個目の「td」として抽出されました。

現状認識できたところで、
欲しい行だけ抽出しようと試みましたが、
複数の「td」が<td class="alfa__item">となっているためか、
やはり最初の「td」しか表示されません。

〈続きのコード〉
td= soup.find(class_="alfa__item")
print(td.text)

欲しい「td」を手に入れることはできるのでしょうか。

※「選択式」というのは該当箇所が、例えばアンケートで①大変良かった②良かった③ふつう④悪かったの中から一つを選ばせるような項目のように見えたためです。