pythonのスクレイピングで、子要素の取得がどうしてもできません。

Question

前提・実現したいこと

お世話になっております。

pythonでのwebスクレイピングで,htmlが

<div id="A"> <ul id="B"> <li> <a href="http:C">　← </li> 　　<li></li> ← 　　<li></li>　← </ul> </div>

となっており、上記の矢印（←）の<li></li>の部分すべてを取得したいのですが、<ul id="B"></ul>以下の子要素が取得できません。

res = requests.get("webサイトのURL")
res.raise_for_status()


soup = bs4.BeautifulSoup(res.text,"lxml")

elem = soup.select('#B')
print("elem = {}".format(elem))

このプログラムを試したところ,結果が

elem = [<ul id="B"></ul>]

となってしまい,子要素である
<li>
<a href="http:C">
</li>
<li></li>
<li></li>
が取得できませんでした。

試したこと

プログラムの
elem = soup.select('#B')
の箇所を
elem = soup.find_all(id = 'B')
としてみたり、
elem = soup.select(#A)
としてみたり、
elem = soup.select(#B li a)

など試してみましたが、すべてダメでした。

補足情報（FW/ツールのバージョンなど）

ここにより詳細な情報を記載してください。

Answer 1

質問のコードを実行すると、

elem = [<ul id="B">
<li>
<a href="http:C">　←
</a></li>
<li></li> ←
<li></li>　←
</ul>]

と表示されるので、何か実際の状態と、質問内容が合ってないと思われます。

Comments

[kuuuu]

なるほど…。
プログラムは変えずに、違うサイトで試してみます。

Answer 2

select() はマッチする要素のリストを返すので、探したい要素が1つだけなら、select_one() をお使いください。

from bs4 import BeautifulSoup

html = """<div id="A">
<ul id="B">
<li>
<a href="http:C"></a>
</li>
<li></li>
<li></li>
</ul>
</div>"""

soup = BeautifulSoup(html, "lxml")

a = soup.select_one("#B").a
print(a)

追記

id="B" 以下のすべての li タグ

from bs4 import BeautifulSoup

html = """<div id="A">
<ul id="B">
<li>
<a href="http:C"></a>
</li>
<li></li>
<li></li>
</ul>
</div>"""

soup = BeautifulSoup(html, "lxml")

for li in soup.select("#B li"):
    print(li)

Comments

[kuuuu]

回答して頂いたのに申し訳ありません。私の表現のミスです。
ほしいのは子要素すべての＜li＞＜/li＞です。
申し訳ございません。

[tiitoi]

であれば、soup.select("#B li") でどうでしょうか。
返り値は li タグのリストになります。