iframeデータのスクレイピングについて

Question

下記のサイトのiframe箇所のデータをVBAでHTMLDocumentオブジェクトとして取得しようと
しているのですが、検索キーワードをもとにサーバー側でjavascriptの処理結果を
表示しているため、取得することができません。

https://www.rohm.co.jp/search/application-notes

このような動的に作成されるHTMLの場合は、スクレイピングは難しいでしょうか？

Answer 1

VBAでjapascript実行までのWait処理を入れ、その後DOMを取得し対応できました。

Answer 2

現在、どのようにスクレイピングしているのか不明ですが、 JavaScript 等で、動的にデータをダウンロードして表示させている場合は、クライアント側で、JavaScript を解釈・実行してデータを取得する必要があります。

よく使われる方法としては、JavaScript の実行に対応した WebDriver + Selenium 等を利用があります。

検索するとサンプルはいろいろ見つかると思いますので、チャレンジしてみてください。

Comments

[kotakeshi0923]

ご回答ありがとうございました。

スクレイピングは、iframeで表示される内容が含まれるURLのHTML文書を
取得するという流れですが、
paginationで2ページ目以降を表示させると、該当のhtmlソースが見当たらないという状況です。
WebDriver + Selenium　についても確認してみます。