質問をすることでしか得られない、回答やアドバイスがある。

15分調べてもわからないことは、質問しよう!

ただいまの
回答率

88.13%

python(beautifulsoup)で特定tagとtag間のデータ取得方法

受付中

回答 1

投稿

  • 評価
  • クリップ 0
  • VIEW 4,023

score 304

以下のようなhtmlの中で
<span>ストーリー</span>
から
<span>キャスト</span>
間のデータをpythonを利用して取得したいですが、
どのように実装すればよいかわかりません。
何かヒントになることがありましたら教えていただけますでしょうか。

xx.html

<html>
<body>
<span class="mw-headline" id=".E3.82.B9.E3.83.88.E3.83.BC.E3.83.AA.E3.83.BC">ストーリー</span>
<span></span>
<p>
xxx
xxx
</p>
<span></span>
<span class="mw-headline" id=".E3.82.AD.E3.83.A3.E3.82.B9.E3.83.88">キャスト</span>
</body>
</html>

現在はbeautifulsoupを使って実装しようと思いますが、別の方法でもかまいません。

beautifulsoupでの実装だと以下のような流れになるかと思いますが、findAllのとこからつまってます。

from urllib.request import urlopen
from bs4 import BeautifulSoup

html = urlopen("xx.html")
bsObj = BeautifulSoup(html, "html.parser")

nameList = bsObj.findAll....

皆さんの知恵を貸してください。
よろしくお願いします。

  • 気になる質問をクリップする

    クリップした質問は、後からいつでもマイページで確認できます。

    またクリップした質問に回答があった際、通知やメールを受け取ることができます。

    クリップを取り消します

  • 良い質問の評価を上げる

    以下のような質問は評価を上げましょう

    • 質問内容が明確
    • 自分も答えを知りたい
    • 質問者以外のユーザにも役立つ

    評価が高い質問は、TOPページの「注目」タブのフィードに表示されやすくなります。

    質問の評価を上げたことを取り消します

  • 評価を下げられる数の上限に達しました

    評価を下げることができません

    • 1日5回まで評価を下げられます
    • 1日に1ユーザに対して2回まで評価を下げられます

    質問の評価を下げる

    teratailでは下記のような質問を「具体的に困っていることがない質問」、「サイトポリシーに違反する質問」と定義し、推奨していません。

    • プログラミングに関係のない質問
    • やってほしいことだけを記載した丸投げの質問
    • 問題・課題が含まれていない質問
    • 意図的に内容が抹消された質問
    • 過去に投稿した質問と同じ内容の質問
    • 広告と受け取られるような投稿

    評価が下がると、TOPページの「アクティブ」「注目」タブのフィードに表示されにくくなります。

    質問の評価を下げたことを取り消します

    この機能は開放されていません

    評価を下げる条件を満たしてません

    評価を下げる理由を選択してください

    詳細な説明はこちら

    上記に当てはまらず、質問内容が明確になっていない質問には「情報の追加・修正依頼」機能からコメントをしてください。

    質問の評価を下げる機能の利用条件

    この機能を利用するためには、以下の事項を行う必要があります。

回答 1

0

beautifulsoupを使うなら、ストーリーとキャストを検索して、
間にあるものをリストから抜き出すのはいかがでしょうか。

story = bsObj.find(
    "span",
    class_="mw-headline",
    id=".E3.82.B9.E3.83.88.E3.83.BC.E3.83.AA.E3.83.BC")
cast = bsObj.find(
    "span",
    class_="mw-headline",
    id=".E3.82.AD.E3.83.A3.E3.82.B9.E3.83.88")

data = story.find_next_siblings()
data = data[:data.index(cast)]
data = '\n'.join(map(str, data))

print(data)

find_next_siblings()が機能しない場合の別解として、
find_all()からのスライスです。

story = bsObj.find(
    "span",
    class_="mw-headline",
    id=".E3.82.B9.E3.83.88.E3.83.BC.E3.83.AA.E3.83.BC")
cast = bsObj.find(
    "span",
    class_="mw-headline",
    id=".E3.82.AD.E3.83.A3.E3.82.B9.E3.83.88")

start, end = bsObj.find_all().index(story), bsObj.find_all().index(cast)
data = bsObj.find_all()[start + 1:end]
data = '\n'.join(map(str, data))
print(data)

投稿

編集

  • 回答の評価を上げる

    以下のような回答は評価を上げましょう

    • 正しい回答
    • わかりやすい回答
    • ためになる回答

    評価が高い回答ほどページの上位に表示されます。

  • 回答の評価を下げる

    下記のような回答は推奨されていません。

    • 間違っている回答
    • 質問の回答になっていない投稿
    • スパムや攻撃的な表現を用いた投稿

    評価を下げる際はその理由を明確に伝え、適切な回答に修正してもらいましょう。

  • 2017/02/05 21:07

    回答ありがとうございます。
    すみません。もう一点だけ質問させてください。

    data = story.find_next_siblings()
    したら
    storyタグの次のリスト(?)1行のみ取れてきました。

    tagとtag間にあるすべてを取れたいですが、どのようにすればよろしいでしょうか。。

    キャンセル

  • 2017/02/05 21:28

    別な方法を追記してみました

    キャンセル

15分調べてもわからないことは、teratailで質問しよう!

  • ただいまの回答率 88.13%
  • 質問をまとめることで、思考を整理して素早く解決
  • テンプレート機能で、簡単に質問をまとめられる

関連した質問

同じタグがついた質問を見る