質問をすることでしか得られない、回答やアドバイスがある。

15分調べてもわからないことは、質問しよう!

新規登録して質問してみよう
ただいま回答率
85.50%
Node.js

Node.jsとはGoogleのV8 JavaScriptエンジンを使用しているサーバーサイドのイベント駆動型プログラムです。

Webサイト

一つのドメイン上に存在するWebページの集合体をWebサイトと呼びます。

JavaScript

JavaScriptは、プログラミング言語のひとつです。ネットスケープコミュニケーションズで開発されました。 開発当初はLiveScriptと呼ばれていましたが、業務提携していたサン・マイクロシステムズが開発したJavaが脚光を浴びていたことから、JavaScriptと改名されました。 動きのあるWebページを作ることを目的に開発されたもので、主要なWebブラウザのほとんどに搭載されています。

Q&A

解決済

1回答

1023閲覧

Node.jsでJavaScriptが必要なwebサイトのソースを取得する

LUCKY5296

総合スコア5

Node.js

Node.jsとはGoogleのV8 JavaScriptエンジンを使用しているサーバーサイドのイベント駆動型プログラムです。

Webサイト

一つのドメイン上に存在するWebページの集合体をWebサイトと呼びます。

JavaScript

JavaScriptは、プログラミング言語のひとつです。ネットスケープコミュニケーションズで開発されました。 開発当初はLiveScriptと呼ばれていましたが、業務提携していたサン・マイクロシステムズが開発したJavaが脚光を浴びていたことから、JavaScriptと改名されました。 動きのあるWebページを作ることを目的に開発されたもので、主要なWebブラウザのほとんどに搭載されています。

0グッド

0クリップ

投稿2020/04/04 15:38

前提・実現したいこと

Node.jsでJavaScriptを有効にする必要のあるwebサイトのソースを取得する

該当のソースコード

node.js

1//モジュール 2const request = require("request"); 3const cheerio = require("cheerio"); 4 5var option = { 6 url: url, 7 method: "GET" 8} 9request(option, (error, response, body) => { 10 const $ = cheerio.load(body); 11 console.log($("html").html()); //実際にはブラウザ上でjavascriptを有効した際に出力される要素を取得 12}

試したこと

requestのみ。

補足情報(FW/ツールのバージョンなど)

Node.js v12.14.0
request 2.88.2
cheerio 1.0.0-rc.3

気になる質問をクリップする

クリップした質問は、後からいつでもMYページで確認できます。

またクリップした質問に回答があった際、通知やメールを受け取ることができます。

バッドをするには、ログインかつ

こちらの条件を満たす必要があります。

guest

回答1

0

ベストアンサー

JavaScriptを有効にする必要のあるwebサイトのソースを取得する

多くのJavaScriptでダイナミックにデータをレンダリングしているサイトは
裏でAjax通信を行って情報の核となるデータを直接ロードして居ることが多いです。

デベロッパーツールのネットワークタブを開き、XHRで監視してみては?

またHTMLはWebマスターのデザインの都合でコロコロ変わるので、
JSONで得られる方が圧倒的に楽だったりします。

そのサイトがどういう構造なのかを分析する必要があるので、
それ以上の事はアドバイス出来ません。

投稿2020/04/05 06:09

miyabi-sun

総合スコア21158

バッドをするには、ログインかつ

こちらの条件を満たす必要があります。

LUCKY5296

2020/04/05 10:44

ご丁寧な回答をありがとうございます。 デベロッパーツールより確認したら、求めていたデータがJSON形式で送信されていました。 ありがとうございました。
guest

あなたの回答

tips

太字

斜体

打ち消し線

見出し

引用テキストの挿入

コードの挿入

リンクの挿入

リストの挿入

番号リストの挿入

表の挿入

水平線の挿入

プレビュー

15分調べてもわからないことは
teratailで質問しよう!

ただいまの回答率
85.50%

質問をまとめることで
思考を整理して素早く解決

テンプレート機能で
簡単に質問をまとめる

質問する

関連した質問