pythonのスクレイピングでリンク先をすべて取得したいが、コメント内のリンク先は除外したい。

Question

pythonでリンク(a href)を順次取得していきたいのですが、
コメント内部にあるリンクも取得してしまって困っています。

例えば以下のURLを取得してしまいます。
./lp/tomomura/index.html

    <!-- <div>
      <ul>
        <li><a href="./lp/xxxx/index.html"><img src="./assets/images/top/banner-xxxx.png" alt=""></a></li>
      </ul>
    </div> -->

現状のコード（要点のみ抜粋）は以下の通りです。

import requests
import lxml.html
from bs4 import BeautifulSoup

url = 'https://xxxxxx'
next_url = []

res = requests.get(url)
html = res.text
soup = BeautifulSoup(html, 'html.parser')
html = lxml.html.fromstring(html)
html.make_links_absolute(url)

anchors = html.xpath("//a")
for anch in anchors:
	try:
		href = anch.attrib['href']
	except:
		href = ""
	if href != "":
		next_url.append(href)

よろしくお願い致します。

Comments

[otn]

再現しませんので、現象の確認できるデータとコードを示してください。

[kumataro_]

コードは上記のものにurlをセットすれば動くはずです。
urlは都合上公開が難しい状況です。
よろしくお願い致します。

[otn]

別に実物じゃなくて良いので、現象の再現できるデータ(HTMLのこと)を提示してください。
プログラムは(冗長ですが)間違ってません。

[kumataro_]

誠に申し訳ございません！
勘違いをしておりました。

コメントされているリンクですが、別の箇所でコメントしていない状態で記載されておりました。
私のまったくの勘違いでした。

コメントのみのリンクは、ライブラリの方で自動的に除外しているようでした。

お手間をおかけしまして、申し訳ありません。

Answer 1

事象は私の勘違いでした。
申し訳ございません。