質問をすることでしか得られない、回答やアドバイスがある。

15分調べてもわからないことは、質問しよう!

新規登録して質問してみよう
ただいま回答率
85.47%
PHP

PHPは、Webサイト構築に特化して開発されたプログラミング言語です。大きな特徴のひとつは、HTMLに直接プログラムを埋め込むことができるという点です。PHPを用いることで、HTMLを動的コンテンツとして出力できます。HTMLがそのままブラウザに表示されるのに対し、PHPプログラムはサーバ側で実行された結果がブラウザに表示されるため、PHPスクリプトは「サーバサイドスクリプト」と呼ばれています。

Q&A

解決済

1回答

886閲覧

phpでxpathを利用したrss/atomのスクレイピングで取得できない項目がある

hrysyk

総合スコア9

PHP

PHPは、Webサイト構築に特化して開発されたプログラミング言語です。大きな特徴のひとつは、HTMLに直接プログラムを埋め込むことができるという点です。PHPを用いることで、HTMLを動的コンテンツとして出力できます。HTMLがそのままブラウザに表示されるのに対し、PHPプログラムはサーバ側で実行された結果がブラウザに表示されるため、PHPスクリプトは「サーバサイドスクリプト」と呼ばれています。

0グッド

0クリップ

投稿2018/09/28 02:35

rssのスクレイピングで<link>のurlを取得できない

rssとxpathによるfeedのスクレイピングを勉強中なのですが、rssの<link>タグの内容だけが取得されず疑問に思っています。
rssとatom共に、タイトル、url、日付の取得ができるようになりたいのと、同じ<item>に存在している<title><link>で、なぜ<link>の値が取得できないのかの理由も知りたいと思います。

発生している問題・エラーメッセージ

エラーでは無いのですがvar_dumpの出力結果となり'url'だけが取得されません。

array (size=10) 0 => array (size=3) 'title' => string '【無印】久しぶりのディフューザー。いつか作ってみたいオリジナルブレンド。' (length=108) 'url' => string '' (length=0) 'date' => string '2018-09-27T22:40:19+09:00' (length=25)

該当のソースコード

php

1// RSSの場合 2$dom = new DOMDocument; 3@$dom->loadHTMLFile('http://ryouhinseikatsu.blog.jp/index.rdf'); 4$xpath = new DOMXPath($dom); 5$entries = []; 6foreach ($xpath->query('//item') as $node) { 7 $entries[] = [ 8 'title' => $xpath->evaluate('string(title)', $node), 9 'url' => $xpath->evaluate('string(link)', $node), 10 'date' => $xpath->evaluate('string(date)', $node), 11 ]; 12} 13var_dump($entries);

試したこと

同じサイトのatomについては以下の内容でurlを取得することができました。

php

1// ATOMの場合 2$dom = new DOMDocument; 3@$dom->loadHTMLFile('http://ryouhinseikatsu.blog.jp/atom.xml'); 4$xpath = new DOMXPath($dom); 5$entries = []; 6foreach ($xpath->query('//entry') as $node) { 7 $entries[] = [ 8 'title' => $xpath->evaluate('string(title)', $node), 9 'url' => $xpath->evaluate('string(link/@href)', $node), 10 'date' => $xpath->evaluate('string(modified)', $node), 11 ]; 12} 13var_dump($entries);

学習中ということもあり根本的な理解が不足していると思うのですが、名前空間などが影響しているのかと思っていますが上手くいきませんでした。

補足情報(FW/ツールのバージョンなど)

php 7.1の環境で動かしています

気になる質問をクリップする

クリップした質問は、後からいつでもMYページで確認できます。

またクリップした質問に回答があった際、通知やメールを受け取ることができます。

バッドをするには、ログインかつ

こちらの条件を満たす必要があります。

guest

回答1

0

ベストアンサー

「linkの値が取得できない」理由ですが、

rssの方のソースコードで取ってきている データを見ると

xml

1<link> 2http://ryouhinseikatsu.blog.jp/archives/1072694575.html 3</link>

のようになっています。

質問者様のソースは、rssをHTMLのパーサーで解析しているのですが、
HTMLにおいてlinkタグの構文は要素を取らない(開始タグと終了タグで囲まない)タグ
なので、パーサーが要素をとってこないのです。

解決方法としては、PHPのrssのパーサーがライブラリとして存在するようですので
それを利用するなどでしょうか。

参考
https://manablog.org/php_rss_get/
https://syncer.jp/php-how-to-get-feed

投稿2018/09/28 04:21

編集2018/09/28 04:33
taka-saan

総合スコア665

バッドをするには、ログインかつ

こちらの条件を満たす必要があります。

hrysyk

2018/10/01 07:50

ありがとうございます、確かに本来の用途とは違う使い方になるとは思っていましたがそこがひっかかっていたのですね。参考サイトもありがとうございます。なるべく今後のバージョンアップにも対応できるように、標準のもので解決できたらいいなと思っておりました。参考にさせていただきます。
guest

あなたの回答

tips

太字

斜体

打ち消し線

見出し

引用テキストの挿入

コードの挿入

リンクの挿入

リストの挿入

番号リストの挿入

表の挿入

水平線の挿入

プレビュー

15分調べてもわからないことは
teratailで質問しよう!

ただいまの回答率
85.47%

質問をまとめることで
思考を整理して素早く解決

テンプレート機能で
簡単に質問をまとめる

質問する

関連した質問