質問をすることでしか得られない、回答やアドバイスがある。

15分調べてもわからないことは、質問しよう!

新規登録して質問してみよう
ただいま回答率
86.12%
Node.js

Node.jsとはGoogleのV8 JavaScriptエンジンを使用しているサーバーサイドのイベント駆動型プログラムです。

XPath(XML Path)

XML Path Language (XPath; XMLパス言語)は、マークアップ言語 XML に準拠した文書の特定の部分を指定する言語構文の事をいいます。XPathはXMLとは別の構文を使用します。XMLドキュメントの抽象、論理ストラクチャ上で動作します。

HTML

HTMLとは、ウェブ上の文書を記述・作成するためのマークアップ言語のことです。文章の中に記述することで、文書の論理構造などを設定することができます。ハイパーリンクを設定できるハイパーテキストであり、画像・リスト・表などのデータファイルをリンクする情報に結びつけて情報を整理します。現在あるネットワーク上のほとんどのウェブページはHTMLで作成されています。

解決済

NodeJSでXPathを利用したい

minato2000
minato2000

総合スコア10

Node.js

Node.jsとはGoogleのV8 JavaScriptエンジンを使用しているサーバーサイドのイベント駆動型プログラムです。

XPath(XML Path)

XML Path Language (XPath; XMLパス言語)は、マークアップ言語 XML に準拠した文書の特定の部分を指定する言語構文の事をいいます。XPathはXMLとは別の構文を使用します。XMLドキュメントの抽象、論理ストラクチャ上で動作します。

HTML

HTMLとは、ウェブ上の文書を記述・作成するためのマークアップ言語のことです。文章の中に記述することで、文書の論理構造などを設定することができます。ハイパーリンクを設定できるハイパーテキストであり、画像・リスト・表などのデータファイルをリンクする情報に結びつけて情報を整理します。現在あるネットワーク上のほとんどのウェブページはHTMLで作成されています。

1回答

0リアクション

0クリップ

238閲覧

投稿2022/09/21 03:26

編集2022/09/21 03:53

前提

WebページにRSSが無いので、Webページをスクレイピングして新着ニュースをメールで送信しようと考えています。
ニュース部分をHTMLから切り出す為にNode.jsでXPathを利用してプログラムを作っています。

実現したいこと

NodeJSでXPathを利用したい。

発生している問題・エラーメッセージ

「n個の要素が見つかりました」(nは0以上)と表示される事を期待しているが、「0個の要素が見つかりました」と表示されてしまう。

該当のソースコード

javascript

const fetch = require('node-fetch') const xpath = require('xpath') const parse5 = require('parse5') const xmlser = require('xmlserializer') const DOMParserDom = require('xmldom').DOMParser; (async () => { const url = 'https://gundamevolution.jp/news/' const res = await fetch(url) const text = await res.text() const document = parse5.parse(text) const xhtml = xmlser.serializeToString(document) const doc = new DOMParserDom().parseFromString(xhtml) const select = xpath.useNamespaces({ 'x': 'https://www.w3.org/1999/xhtml' }) const items = select('//x:a[contains(@class, "news-list__item")]', doc) console.log(`${items.length}個の要素が見つかりました`) // 実行結果 // 0個の要素が見つかりました })()

試したこと

  • fetchで取得したHTMLに問題がないかを確認したが、ニュースのタイトルなどがout.htmlで確認出来たので問題ないと判断した。

diff

+ const fs = require('fs'); + fs.writeFileSync('out.html', text)
  • 簡単なXPathに置き換えてXPathの動作確認をしたが、「0個の要素が見つかりました」が表示された。

diff

- const items = select('//x:a[contains(@class, "news-list__item")]', doc) + const items = select('//x:a', doc)
  • 別のWebサイトでXPathの動作確認をしたが、「0個の要素が見つかりました」が表示された。

diff

- const url = 'https://gundamevolution.jp/news/' + const url = 'http://example.com' - const items = select('//x:a[contains(@class, "news-list__item")]', doc) + const items = select('//x:a', doc)

補足情報(FW/ツールのバージョンなど)

  • Windows 11 21H2
$ node --version v16.14.2

package.json

"dependencies": { "node-fetch": "^2.6.0", "parse5": "^7.1.1", "xmldom": "^0.6.0", "xmlserializer": "^0.6.1", "xpath": "^0.0.32" }

参考

https://qiita.com/ledsun/items/0965a60f9bdff04f2fa0#xpath-parse5

以下のような質問にはリアクションをつけましょう

  • 質問内容が明確
  • 自分も答えを知りたい
  • 質問者以外のユーザにも役立つ

リアクションが多い質問は、TOPページの「注目」タブのフィードに表示されやすくなります。

気になる質問をクリップする

クリップした質問は、後からいつでもマイページで確認できます。

またクリップした質問に回答があった際、通知やメールを受け取ることができます。

下記のような質問は推奨されていません。

  • 間違っている
  • 質問になっていない投稿
  • スパムや攻撃的な表現を用いた投稿

適切な質問に修正を依頼しましょう。

int32_t

2022/09/21 03:30

変数 xhtml の内容はどうなっていますか。
m.ts10806

2022/09/21 03:32

>WebページにRSSが無い 自身が管理しているWebページでしょうか? ニュースのもとはどこにある情報でしょうか?(データベースか、APIか、その他)
minato2000

2022/09/21 03:35

int32_tさん、長くなるのでpastebinにアップロードしました。 クラス名「news-list__item」の要素内にニュースタイトルが含まれているので問題ないHTMLが取得できている状態だと思います。 https://pastebin.com/jgqT1PSY

まだ回答がついていません

会員登録して回答してみよう

アカウントをお持ちの方は

15分調べてもわからないことは
teratailで質問しよう!

ただいまの回答率
86.12%

質問をまとめることで
思考を整理して素早く解決

テンプレート機能で
簡単に質問をまとめる

質問する

関連した質問

同じタグがついた質問を見る

Node.js

Node.jsとはGoogleのV8 JavaScriptエンジンを使用しているサーバーサイドのイベント駆動型プログラムです。

XPath(XML Path)

XML Path Language (XPath; XMLパス言語)は、マークアップ言語 XML に準拠した文書の特定の部分を指定する言語構文の事をいいます。XPathはXMLとは別の構文を使用します。XMLドキュメントの抽象、論理ストラクチャ上で動作します。

HTML

HTMLとは、ウェブ上の文書を記述・作成するためのマークアップ言語のことです。文章の中に記述することで、文書の論理構造などを設定することができます。ハイパーリンクを設定できるハイパーテキストであり、画像・リスト・表などのデータファイルをリンクする情報に結びつけて情報を整理します。現在あるネットワーク上のほとんどのウェブページはHTMLで作成されています。