前提・実現したいこと
GASについてあまり詳しくないのですがググってもやりたいことを解決する方法が見つからなかったのでご相談させてください。
Googleサジェストの一括取得のスクレイピングをしたいのです。
調べたいキーワードが例えば、GASであれば、GAS + A~z、あ〜んをグーグル検索した場合のサジェストを一括で取得するようにしたいです。
該当のキーワードであるGASをA列に入れて、B列にGoogleサジェストの一覧を表示で取得できるようにしたいのですが、やり方がイマイチわかりません。
Google スプレッドシート
| A列 | B列 |
|---|---|
| kw | kw +aの予測1 |
| kw +aの予測2 | |
| kw +aの予測3 | |
| ︙ | |
| kw +bの予測1 | |
| kw +aの予測2 |
該当のソースコード
//サジェスト取得
function test(){
var ss = SpreadsheetApp.getActive().getSheetByName('test');
var kw = ss.getRange("A1").getValue();
var word = [" a"," b"," C"];
var url = "http://www.google.com/complete/search?hl=ja&output=toolbar&q="+kw +word ;"//suggestion/@data" ;
var res = UrlFetchApp.fetch(url).getContentText();
var values = XmlService.parse(res).getRootElement().getChildren("CompleteSuggestion").map(function(e) {return [e.getChild("suggestion").getAttribute("data").getValue()]});
ss.getRange(1, 3, values.length, values[0].length).setValues(values);
}このソースの中の
var word = [" a"," b"," C"];
var url = "http://www.google.com/complete/search?hl=ja&output=toolbar&q="+kw +word ;"//suggestion/@data" ;ここをループさせたい
"http://www.google.com/complete/search?hl=ja&output=toolbar&q="+kw + a ;"//suggestion/@data"
"http://www.google.com/complete/search?hl=ja&output=toolbar&q="+kw + b ;"//suggestion/@data"
"http://www.google.com/complete/search?hl=ja&output=toolbar&q="+kw + c ;"//suggestion/@data"
〜〜〜
"http://www.google.com/complete/search?hl=ja&output=toolbar&q="+kw + z ;"//suggestion/@data"
"http://www.google.com/complete/search?hl=ja&output=toolbar&q="+kw + あ ;"//suggestion/@data"
〜〜〜
"http://www.google.com/complete/search?hl=ja&output=toolbar&q="+kw + ん ;"//suggestion/@data"みたいな形でサジェストの一覧を取得してB列に吐き出したいのですが、どのようにすればいいのでしょうか？
-
気になる質問をクリップする
クリップした質問は、後からいつでもマイページで確認できます。
またクリップした質問に回答があった際、通知やメールを受け取ることができます。
クリップを取り消します
-
良い質問の評価を上げる
以下のような質問は評価を上げましょう
- 質問内容が明確
- 自分も答えを知りたい
- 質問者以外のユーザにも役立つ
評価が高い質問は、TOPページの「注目」タブのフィードに表示されやすくなります。
質問の評価を上げたことを取り消します
-
評価を下げられる数の上限に達しました
評価を下げることができません
- 1日5回まで評価を下げられます
- 1日に1ユーザに対して2回まで評価を下げられます
質問の評価を下げる
teratailでは下記のような質問を「具体的に困っていることがない質問」、「サイトポリシーに違反する質問」と定義し、推奨していません。
- プログラミングに関係のない質問
- やってほしいことだけを記載した丸投げの質問
- 問題・課題が含まれていない質問
- 意図的に内容が抹消された質問
- 過去に投稿した質問と同じ内容の質問
- 広告と受け取られるような投稿
評価が下がると、TOPページの「アクティブ」「注目」タブのフィードに表示されにくくなります。
質問の評価を下げたことを取り消します
この機能は開放されていません
評価を下げる条件を満たしてません
質問の評価を下げる機能の利用条件
この機能を利用するためには、以下の事項を行う必要があります。
- 質問回答など一定の行動
-
メールアドレスの認証
メールアドレスの認証
-
質問評価に関するヘルプページの閲覧
質問評価に関するヘルプページの閲覧
checkベストアンサー
+1
ちょっとブサイクなのかなぁ…。
//サジェスト取得
function test(){
var ss = SpreadsheetApp.getActive().getSheetByName('test');
var kw = ss.getRange("A1").getValue();
var words = "abcdefghijklmnopqrstuvwxyzあいうえおかきくけこさしすせそたちつてとなにぬねのはひふへほまみむめもやゆよらりるれろわをん";
var arr = [];
words.split('').forEach(function(w) {
var url = "http://www.google.com/complete/search?hl=ja&output=toolbar&q=" + kw + " " + w + "//suggestion/@data";
var res = UrlFetchApp.fetch(url).getContentText();
var values = XmlService.parse(res).getRootElement().getChildren("CompleteSuggestion").map(function(e) {return [e.getChild("suggestion").getAttribute("data").getValue()]});
arr = arr.concat(values);
});
ss.getRange(1, 2, arr.length, arr[0].length).setValues(arr);
}投稿
-
回答の評価を上げる
以下のような回答は評価を上げましょう
- 正しい回答
- わかりやすい回答
- ためになる回答
評価が高い回答ほどページの上位に表示されます。
-
回答の評価を下げる
下記のような回答は推奨されていません。
- 間違っている回答
- 質問の回答になっていない投稿
- スパムや攻撃的な表現を用いた投稿
評価を下げる際はその理由を明確に伝え、適切な回答に修正してもらいましょう。
+1
別の案として次のような修正はいかがでしょうか。いろいろなパターンがありますので、これもその一つとしてお考え下さい。この案では、非同期でリクエストを実行できるfetchAllメソッドを使用しました。最初にwordを使ってリクエストを用意し、そのリクエストをUrlFetchApp.fetchAll(reqs)で実行して値を取得します。その後、スプレッドシートへ配置するための値を作成し、それを配置しています。
修正したスクリプト
function test(){
var ss = SpreadsheetApp.getActive().getSheetByName('test');
var kw = ss.getRange("A1").getValue();
var word = [" a"," b"," C"];
var reqs = word.map(function(e) {return {url: "http://www.google.com/complete/search?hl=ja&output=toolbar&q=" + kw + e}});
var res = UrlFetchApp.fetchAll(reqs);
var values = res.reduce(function(ar, e, i) {return ar.concat(XmlService.parse(e.getContentText()).getRootElement().getChildren("CompleteSuggestion").map(function(f, j) {return [f.getChild("suggestion").getAttribute("data").getValue()]}))}, []);
ss.getRange(1, 2, values.length, values[0].length).setValues(values);
}参考
投稿
-
回答の評価を上げる
以下のような回答は評価を上げましょう
- 正しい回答
- わかりやすい回答
- ためになる回答
評価が高い回答ほどページの上位に表示されます。
-
回答の評価を下げる
下記のような回答は推奨されていません。
- 間違っている回答
- 質問の回答になっていない投稿
- スパムや攻撃的な表現を用いた投稿
評価を下げる際はその理由を明確に伝え、適切な回答に修正してもらいましょう。
15分調べてもわからないことは、teratailで質問しよう！
- ただいまの回答率 88.32%
- 質問をまとめることで、思考を整理して素早く解決
- テンプレート機能で、簡単に質問をまとめられる
質問への追記・修正、ベストアンサー選択の依頼
macaron_xxx
2019/05/14 08:55
とりあえず質問を書いてもらっていいですか？
yama-moto
2019/05/15 03:14
すいません、途中で送信してしまってました、、、、