Beautiful soup で文字列の抽出ができない。

Question

以下のようにHPからurlの文字列を抽出しようとしましたがうまくいきません。お力を貸してください。

****__import urllib.request, urllib.error
from bs4 import BeautifulSoup
from selenium import webdriver

url = "https://job.mynavi.jp/19/pc/search/corp74102/outline.html" # アクセスするURL

html = urllib.request.urlopen(url)

soup = BeautifulSoup(html, "html.parser") # htmlをBeautifulSoupで扱う

url = soup.find_all(["th","td"])

url1 = soup.find(text="URL").parent.find_next_siblings()

print(url1.text)
__****

エラーコード：
AttributeError: ResultSet object has no attribute 'text'. You're probably treating a list of items like a single item. Did you call find_all() when you meant to call find()?

ちなみに
print(url1) と実行すると
[<td class="sameSize">http://www.technopro.com/it/</td>]　が表示されます。

Comments

[efcode]

Pythonの場合、最終行のエラー出力だけではなく、Tracebackから全文を掲示した方が状況が伝わりやすくなりますよ

[hikaa]

ありがとうございます！

Answer 1

今回使用されている find_next_siblings()メソッドは検索した結果を全て返しますので、結果はResultSetというコレクション型（Listみたいなもの）で戻るようです。
ですので結果を表示する為には、ループにて

url1 = soup.find(text="URL").parent.find_next_siblings()
for u in url1:
   print(u.text)

とする必要があります。
もしくは単一の結果を返すfind_next_sibling()を使って

url1 = soup.find(text="URL").parent.find_next_sibling()
print(url1.text)

としても良いかもしれません。

Comments

[hikaa]

ありがとうございました。解決しました！