質問をすることでしか得られない、回答やアドバイスがある。

15分調べてもわからないことは、質問しよう!

新規登録して質問してみよう
ただいま回答率
85.48%
スクレイピング

スクレイピングとは、公開されているWebサイトからページ内の情報を抽出する技術です。

Pythonista

Pythonistaは、iOS上でPythonプログラミングができる開発アプリです。さらに、Pythonの関数・変数などを自動で補完する便利なコードエディタや、PythonスクリプトをiOS上で多様な形で機能させる各種機能も内包しています。

Q&A

解決済

1回答

702閲覧

スクレイピングでテキストのみ出力されるようにしたい

loulou098

総合スコア15

スクレイピング

スクレイピングとは、公開されているWebサイトからページ内の情報を抽出する技術です。

Pythonista

Pythonistaは、iOS上でPythonプログラミングができる開発アプリです。さらに、Pythonの関数・変数などを自動で補完する便利なコードエディタや、PythonスクリプトをiOS上で多様な形で機能させる各種機能も内包しています。

0グッド

0クリップ

投稿2023/04/23 22:23

実現したいこと

このページで哲学者の名言を出力(できればCSSセレクタを用いて)したいです。(「哲学は学べない。学べるのは哲学することだけである。」、「内容のない思考は空虚であり、概念のない直観は盲目である。」などの部分)

前提

今のコードでは、以下のような余分なところを排除し、

Python

1<strong><strong><strong>すべての者は生まれながらに知恵を求める。</strong></strong></strong> 2<strong><strong>すべての者は生まれながらに知恵を求める。</strong></strong>

例えば以下のみのような<strong>"名言"</strong>を取得し、

Python

1<strong>すべての者は生まれながらに知恵を求める。</strong>

そこから<strong></strong>を省いたテキストのみを取得したいです。

発生している問題・エラーメッセージ

エラーではないですが、こちらが出力結果です。

<h2 class="wp-block-heading">哲学者の名言集まとめ一覧(あいうえお順)</h2> <h2 class="wp-block-heading">アリストテレスの名言紹介</h2> <h2 class="wp-block-heading">イマヌエル・カントの名言紹介</h2> <h2 class="wp-block-heading">エーリッヒ・フロムの名言紹介</h2> <h2 class="wp-block-heading">セーレン・キルケゴールの名言紹介</h2> <h2 class="wp-block-heading">孔子の名言紹介</h2> <h2 class="wp-block-heading">ソクラテスの名言紹介</h2> <h2 class="wp-block-heading">ニーチェの名言紹介</h2> <h2 class="wp-block-heading">ハンナ・アーレントの名言紹介</h2> <h2 class="wp-block-heading">ピタゴラスの名言紹介</h2> <h2 class="wp-block-heading">プラトンの名言紹介</h2> <h2 class="wp-block-heading">ヘーゲルの名言紹介</h2> <h2 class="wp-block-heading">マルクス・アウレリウスの名言紹介</h2> <h2 class="wp-block-heading">孟子の名言紹介</h2> <h2 class="wp-block-heading">モンテスキューの名言紹介</h2> <h2 class="wp-block-heading">老子の名言紹介</h2> <strong><strong><strong>すべての者は生まれながらに知恵を求める。</strong></strong></strong> <strong><strong>すべての者は生まれながらに知恵を求める。</strong></strong> <strong>すべての者は生まれながらに知恵を求める。</strong> <strong><strong><strong><strong><strong>我々の性格は、我々の行動の結果なり。</strong></strong></strong></strong></strong> <strong><strong><strong><strong>我々の性格は、我々の行動の結果なり。</strong></strong></strong></strong> <strong><strong><strong>我々の性格は、我々の行動の結果なり。</strong></strong></strong> <strong><strong>我々の性格は、我々の行動の結果なり。</strong></strong> <strong>我々の性格は、我々の行動の結果なり。</strong> <strong><strong><strong><strong>哲学は学べない。学べるのは哲学することだけである。</strong></strong></strong></strong> <strong><strong><strong>哲学は学べない。学べるのは哲学することだけである。</strong></strong></strong> <strong><strong>哲学は学べない。学べるのは哲学することだけである。</strong></strong> <strong>哲学は学べない。学べるのは哲学することだけである。</strong> <strong><strong><strong><strong>内容のない思考は空虚であり、概念のない直観は盲目である。</strong></strong></strong></strong> <strong><strong><strong>内容のない思考は空虚であり、概念のない直観は盲目である。</strong></strong></strong> <strong><strong>内容のない思考は空虚であり、概念のない直観は盲目である。</strong></strong> <strong>内容のない思考は空虚であり、概念のない直観は盲目である。</strong> 以下略

該当のソースコード

Python

1from time import sleep 2 3import requests 4from bs4 import BeautifulSoup 5import pandas as pd 6 7url = 'https://tomo8language.com/quotes-list-philosopher/' 8 9r = requests.get(url) 10 11r.raise_for_status() 12 13soup = BeautifulSoup(r.content, 'lxml') 14chu_titles = soup.select('.wp-block-heading') 15for h2 in chu_titles: 16 print(h2)#こっからテキスト情報のみ出力したい 17 18#for文で全部の名言を出力したい 19#とりあえず、名言も出力する:名言の書いてあるエリアから、どんどん範囲を狭める 20 21all_meigen = soup.select('strong:last-of-type')#これあってる?範囲をどんどん狭めたつもりだが 22for meigen in all_meigen: 23 print(meigen)

試したこと

・このコードで「すべての者は生まれながらに知恵を求める。」という名言を取得した

Python

1meigen = soup.select_one('strong').text 2print(meigen)

補足情報(FW/ツールのバージョンなど)

Pythonのバージョン:3.10.9

使用PC:Intel MacBook

バージョン:macOS Monterey Version 12.4

気になる質問をクリップする

クリップした質問は、後からいつでもMYページで確認できます。

またクリップした質問に回答があった際、通知やメールを受け取ることができます。

バッドをするには、ログインかつ

こちらの条件を満たす必要があります。

guest

回答1

0

自己解決

このコードで解決しました(全ての名言を取得できました)

Python

1from time import sleep 2 3import requests 4from bs4 import BeautifulSoup 5import pandas as pd 6 7url = 'https://tomo8language.com/quotes-list-philosopher/' 8 9r = requests.get(url) 10 11r.raise_for_status() 12 13all_meigen = soup.select('.fz-18px > strong') 14 15for meigen in all_meigen: 16 print(meigen.text)

投稿2023/04/23 22:41

loulou098

総合スコア15

バッドをするには、ログインかつ

こちらの条件を満たす必要があります。

あなたの回答

tips

太字

斜体

打ち消し線

見出し

引用テキストの挿入

コードの挿入

リンクの挿入

リストの挿入

番号リストの挿入

表の挿入

水平線の挿入

プレビュー

15分調べてもわからないことは
teratailで質問しよう!

ただいまの回答率
85.48%

質問をまとめることで
思考を整理して素早く解決

テンプレート機能で
簡単に質問をまとめる

質問する

関連した質問