質問をすることでしか得られない、回答やアドバイスがある。

15分調べてもわからないことは、質問しよう!

新規登録して質問してみよう
ただいま回答率
85.46%
スクレイピング

スクレイピングとは、公開されているWebサイトからページ内の情報を抽出する技術です。

Python

Pythonは、コードの読みやすさが特徴的なプログラミング言語の1つです。 強い型付け、動的型付けに対応しており、後方互換性がないバージョン2系とバージョン3系が使用されています。 商用製品の開発にも無料で使用でき、OSだけでなく仮想環境にも対応。Unicodeによる文字列操作をサポートしているため、日本語処理も標準で可能です。

Q&A

解決済

1回答

915閲覧

複数のclass属性を指定して中身(要素)をスクレイピングする方法

help-man

総合スコア58

スクレイピング

スクレイピングとは、公開されているWebサイトからページ内の情報を抽出する技術です。

Python

Pythonは、コードの読みやすさが特徴的なプログラミング言語の1つです。 強い型付け、動的型付けに対応しており、後方互換性がないバージョン2系とバージョン3系が使用されています。 商用製品の開発にも無料で使用でき、OSだけでなく仮想環境にも対応。Unicodeによる文字列操作をサポートしているため、日本語処理も標準で可能です。

0グッド

0クリップ

投稿2021/08/07 13:57

編集2021/08/08 04:37

複数のClass属性の中身(要素)をスクレイピングをしたいのですができません。
何卒ご教授をお願いいたします。
【試してみたこと】
①AAA = soup.find(class_="st-uiwrap" and "blog-long m-b50 p-x20")
print(AAA.text)
②BBB = soup.select_one("[class='st-uiwrap'],[class='blog-long m-b50 p-x20']")
print(BBB.text)
③CCC = soup.select(".st-uiwrap .blog-long m-b50 p-x20")
CCC.result = []
for i in CCC:
CCC.result.append(i.text)
print(CCC.result)
【結果】
①"blog-long m-b50 p-x20"の要素だけが表示される
②'st-uiwrap'の要素だけが表示される
③[]が表示される(空が表示される)

[HTML]

<ul class="st-uiwrap"> <li class="today-txt"><a href="/hiragana/chart/">あの段</a></li> <li><a href="/hiragana/chart/"><span class="rise">あいうえお<br class="pc-none">(+0.01%)</span></a></li> </ul> <div class="blog-long m-b50 p-x20"> <h5 class="m-b10">かの段</h5> <p>かきくけこ</p> </div>

ちなみに単体でDDD = soup.find(class_="st-uiwrap")
print(DDD.text)とやると、あいうえお(+0.01%)
EEE = soup.find(class_="blog-long m-b50 p-x20")
print(EEE.text)とやると、かきくけこ
とちゃんと表示されるのですが上記のように複数のClass属性をスクレイピングしようとするとできません。(【あいうえお】【かきくけこ】と表示したい)

やり方がどこか間違えているのでしょうか?
どうすれば複数のClass属性の属性値の中身をスクレイピングできますか?

気になる質問をクリップする

クリップした質問は、後からいつでもMYページで確認できます。

またクリップした質問に回答があった際、通知やメールを受け取ることができます。

バッドをするには、ログインかつ

こちらの条件を満たす必要があります。

otn

2021/08/08 03:33

どういうHTMLで、どのノードを取得したいのでしょうか?
help-man

2021/08/08 04:06

編集しました。 エレメントをコピーして貼り付けました
otn

2021/08/08 04:13

「クラスがこれこれ、または、クラスがこれこれ」の要素を取りたいと言うこと?
help-man

2021/08/08 04:21

複数のクラスを指定して中身(要素)をとりだしだいんです。 ここでいうあいうえお(+0.01%)とかきくけこですね。
guest

回答1

0

ベストアンサー

「クラスがこれこれ、または、クラスがこれこれ」の要素を取りたいと言うこと?

複数のクラスを指定して中身(要素)をとりだしだいんです。

条件を複数指定したときに、
・どちらか一方の条件を満たす・・・・または(or)
・両方共の条件を満たす・・・・・・・かつ(and)
の二通りが考えられるので、そのどちらかでしょうかと聞いているのですが。。。
「女性、かつ、未成年の方」と「女性、または、未成年の方」の違いは分かりますでしょうか?

「または」のようなので、下記が簡明です。

Python

1result = soup.find_all(class_="st-uiwrap") + soup.find_all(class_="blog-long m-b50 p-x20")

1つのfind_allでやるとおそらく正規表現が必要です。

Python

1import re 2result = soup.find_all(class_=re.compile("st-uiwrap|blog-long m-b50 p-x20"))

正規表現の中の|が「または」を意味します。

投稿2021/08/08 04:40

otn

総合スコア84804

バッドをするには、ログインかつ

こちらの条件を満たす必要があります。

help-man

2021/08/08 06:28

コメントありがとうございます。 >>>条件を複数指定したときに、 ・どちらか一方の条件を満たす・・・・または(or) ・両方共の条件を満たす・・・・・・・かつ(and) の二通りが考えられるので、そのどちらかでしょうかと聞いているのですが。。。 そういう意味でしたか。 『どちらか一方の条件を満たす・・・・または(or)』のほうなので大変助かりました。 otnさんには毎回お世話になっておりますので本当にありがとうございます!
guest

あなたの回答

tips

太字

斜体

打ち消し線

見出し

引用テキストの挿入

コードの挿入

リンクの挿入

リストの挿入

番号リストの挿入

表の挿入

水平線の挿入

プレビュー

15分調べてもわからないことは
teratailで質問しよう!

ただいまの回答率
85.46%

質問をまとめることで
思考を整理して素早く解決

テンプレート機能で
簡単に質問をまとめる

質問する

関連した質問