質問をすることでしか得られない、回答やアドバイスがある。

15分調べてもわからないことは、質問しよう!

新規登録して質問してみよう
ただいま回答率
85.35%
Google Apps Script

Google Apps ScriptはGoogleの製品と第三者のサービスでタスクを自動化するためのJavaScriptのクラウドのスクリプト言語です。

JavaScript

JavaScriptは、プログラミング言語のひとつです。ネットスケープコミュニケーションズで開発されました。 開発当初はLiveScriptと呼ばれていましたが、業務提携していたサン・マイクロシステムズが開発したJavaが脚光を浴びていたことから、JavaScriptと改名されました。 動きのあるWebページを作ることを目的に開発されたもので、主要なWebブラウザのほとんどに搭載されています。

Q&A

解決済

1回答

1943閲覧

GAS + phantomjscloudで動的サイトからテキストを取得する方法を教えてください!

babybloom2020

総合スコア6

Google Apps Script

Google Apps ScriptはGoogleの製品と第三者のサービスでタスクを自動化するためのJavaScriptのクラウドのスクリプト言語です。

JavaScript

JavaScriptは、プログラミング言語のひとつです。ネットスケープコミュニケーションズで開発されました。 開発当初はLiveScriptと呼ばれていましたが、業務提携していたサン・マイクロシステムズが開発したJavaが脚光を浴びていたことから、JavaScriptと改名されました。 動きのあるWebページを作ることを目的に開発されたもので、主要なWebブラウザのほとんどに搭載されています。

0グッド

0クリップ

投稿2021/05/27 12:27

Google Apps Scriptを使い、phantomjscloudを通じ下記動的サイトの検索結果をテキストで取得した際、画面に表示された全てのキーワード(※)を配列に格納することができません。

WEBでいろいろ調べてみたのですが、答えにたどり着かないため、ご教授いただけると幸いです。
よろしくお願いいたします。

(※)検索結果ページ右上に表示される「CSVダウンロード」の結果と比較した結果。

(利用サイト)
https://related-keywords.com/

(検索ワード)
携帯電話

(実現したいこと)
サイトに表示されたキーワードを全て配列「contents」に格納したい。

GAS

1function myFunction() { 2 3const URL = 'https://related-keywords.com/result/suggest?q=携帯電話'; 4 var key = '★phantomjscloudのAPIKey★'; 5 6 var option = 7 {url:URL, 8 renderType:"HTML", 9 outputAsJson:true}; 10 11 var payload = JSON.stringify(option); 12 payload = encodeURIComponent(payload); 13 var url = "https://phantomjscloud.com/api/browser/v2/"+ key +"/?request=" + payload; 14 15 var response1 = UrlFetchApp.fetch(url); 16 17 var json = JSON.parse(response1.getContentText()); 18 var source = json["content"]["data"]; 19//-------------------------- 20 21//Parserで取得 22var $ = Cheerio.load(source); 23var contents = [] 24 $(".vdu5kk-0.sc-1p6awuf-0.drqTAc a p").each((i,element) => { 25 contents.push($(element).text()) }); 26Logger.log(contents); 27 28}

気になる質問をクリップする

クリップした質問は、後からいつでもMYページで確認できます。

またクリップした質問に回答があった際、通知やメールを受け取ることができます。

バッドをするには、ログインかつ

こちらの条件を満たす必要があります。

guest

回答1

0

ベストアンサー

これで84個、携帯電話のサジェストとそのサジェストのところの取得はできました。
あとは、共通するhtmlタグを見つけてやればいけると思いますよ。

要Parseライブラリ

gas

1function myFunction() { 2 3const URL = 'https://related-keywords.com/result/suggest?q=携帯電話'; 4 var key = '***'; 5 6 var option = 7 {url:URL, 8 renderType:"HTML", 9 outputAsJson:true}; 10 11 var payload = JSON.stringify(option); 12 payload = encodeURIComponent(payload); 13 var url = "https://phantomjscloud.com/api/browser/v2/"+ key +"/?request=" + payload; 14 15 var response1 = UrlFetchApp.fetch(url); 16 17 var json = JSON.parse(response1.getContentText()); 18 var source = json["content"]["data"]; 19 20 let newsList = Parser.data(source) 21 .from("<p class=\"tgzl94-0 sc-1p6awuf-4 iXFtAV\">") 22 .to("</p>") 23 .iterate(); 24 25console.log(newsList) 26}

投稿2021/05/27 23:48

Tatsunosuke

総合スコア599

バッドをするには、ログインかつ

こちらの条件を満たす必要があります。

babybloom2020

2021/05/28 13:50

回答ありがとうございます! ご教授いただいた内容で再チャレンジしてみます。 ありがとうございまいした!
Tatsunosuke

2021/05/28 14:20

はい!頑張ってください!
guest

あなたの回答

tips

太字

斜体

打ち消し線

見出し

引用テキストの挿入

コードの挿入

リンクの挿入

リストの挿入

番号リストの挿入

表の挿入

水平線の挿入

プレビュー

15分調べてもわからないことは
teratailで質問しよう!

ただいまの回答率
85.35%

質問をまとめることで
思考を整理して素早く解決

テンプレート機能で
簡単に質問をまとめる

質問する

関連した質問