Q&A
requests-htmlで取得し、session.get(url)でスクレイピングしようと思います。
リンク先ＵＲＬは取得できるのですが、リンク元テキストはどのようにして取得するのでしょうか。
url = 'https://www.google.com'
response = session.get(url)
article = response.html.find('#ariticle_content')
article = response.html
t = list(article.absolute_links)
これでリンクURLはとれます。しかし、aタグのテキストはとれません。
どうしたらいいですか。
回答1件
0
ベストアンサー
python
1from urllib.parse import urljoin 2 3from requests_html import HTMLSession 4 5url = "https://www.google.com/" 6 7session = HTMLSession() 8r = session.get(url) 9 10r.html.render() 11 12links = [ 13 {"title": i.text, "link": urljoin(url, i.attrs["href"])} for i in r.html.find("a") 14] 15 16print(links)
投稿2019/04/06 09:09
総合スコア1286
あなたの回答
tips
プレビュー
バッドをするには、ログインかつ
こちらの条件を満たす必要があります。