Q&A
ありがとうございます！自分の検索の仕方が悪かったのかと思いますが「scrapyとBeautifulSoup」を探すことができませんでした。「feedparserというモジュール」も参考にします。本当にありがとうございます！！
ウェブ上ニュースサイトの記事部分だけをpythonで取得する際に、一番良い方法を教えてください。
例えば
https://jp.techcrunch.com/2018/10/09/2018-10-07-elon-musk-deserves-tougher-love-from-the-sec/
のようなニュースサイトの記事があるとして、その記事部分（このサイトですと真ん中の列部分）だけをpythonで取得してその後利用（保存など）したいと考えております。
具体的に参考になるサイトやライブラリなどを教えていただければ自分でその後調査、実装したいと思います。
諸先輩方宜しくお願いします！！
回答2件
0
そういうのは、「ウェブスクレイピング」（スクレイプ＝ひっかく、こすって剥がす）と言います。
あとは、
自分でその後調査、実装したいと思います。
投稿2018/10/09 02:05
総合スコア84538
0
ベストアンサー
pythonですと, Webページを直接解析するならscrapyとBeautifulSoupが定番ではないでしょうか?
記載URLを見るに, サムネイルはmetaタグ内のいずれかの要素, 記事本文ですとclassがarticle-entryのdiv内の内容を拾ってあげれば良さそうですね.
詳しくはGoogleChromeの開発者ツールを利用して, Webページの構成を覗いてみて下さい.
RSSを直接拾うならfeedparserというモジュールがあるので, 参考までに.
投稿2018/10/09 02:08
総合スコア47
あなたの回答
tips
プレビュー
バッドをするには、ログインかつ
こちらの条件を満たす必要があります。
2018/10/09 02:16