質問をすることでしか得られない、回答やアドバイスがある。

15分調べてもわからないことは、質問しよう!

新規登録して質問してみよう
ただいま回答率
85.47%
Google+

Google+とは、Googleが提供するソーシャル・ネットワーキング・サービスです。情報を共有するユーザーの範囲を設定する「サークル」、Webカメラで複数名の相手と無料でビデオチャットできる「ハングアウト」などの機能があります。

Google スプレッドシート

Google スプレッドシートは、フリーで利用できる表計算ソフト。Webアプリのためインターネットに接続することで利用できます。チャートやグラフの作成のほか、シートを他のユーザーと共有したり、同時に作業を進めることも可能です。

Google Apps Script

Google Apps ScriptはGoogleの製品と第三者のサービスでタスクを自動化するためのJavaScriptのクラウドのスクリプト言語です。

Q&A

解決済

1回答

1519閲覧

GASのWebスクレイピングで指定のページ内のURLを取得したい

Risney

総合スコア148

Google+

Google+とは、Googleが提供するソーシャル・ネットワーキング・サービスです。情報を共有するユーザーの範囲を設定する「サークル」、Webカメラで複数名の相手と無料でビデオチャットできる「ハングアウト」などの機能があります。

Google スプレッドシート

Google スプレッドシートは、フリーで利用できる表計算ソフト。Webアプリのためインターネットに接続することで利用できます。チャートやグラフの作成のほか、シートを他のユーザーと共有したり、同時に作業を進めることも可能です。

Google Apps Script

Google Apps ScriptはGoogleの製品と第三者のサービスでタスクを自動化するためのJavaScriptのクラウドのスクリプト言語です。

0グッド

0クリップ

投稿2022/08/04 15:06

編集2022/08/05 11:34

前提

・GASでeBayログイン後のページのテキストは取得できている
・ライブラリはParser

実現したいこと

GASのWebスクレイピングで指定のページ内のURLを取得したい

発生している問題・エラーメッセージ

取得したいURLの箇所のテキストは取得できたのですが、
リンクが取得できず、詰まっています。
イメージ説明
自分でも調査していますが、
なかなか解決できず、
有識者の方にお力添えしていただければ幸いです。

該当のソースコード

javascript

1//eBayにログインする 2function gas_login(){ 3 var login_url = "https://www.ebay.com/signin/s"; 4 5 //ログイン情報(PayLoadデータ) 6 var payload_data = { 7 login_id: "sample@gmail.com", 8 password: "samplePassword" 9 }; 10 11 //POSTデータ(POSTオプション) 12 var post_option = { 13 method: "post", 14 payload: payload_data, 15 followRedirects: false 16 }; 17 18 //レスポンス(POSTリクエスト) 19 var response = UrlFetchApp.fetch(login_url, post_option); 20 21 //レスポンスのヘッダーからcookieを取得 22 var cookies = response.getHeaders()["Set-Cookie"]; 23 24 // ログインで認証されたcookieはヘッダーで使用 25 var headers = { Cookie: cookies }; 26 var get_option = { 27 method: "get", 28 headers: headers, 29 followRedirects: true 30 }; 31 var scraping_url = "https://www.ebay.com/sh/ord"; 32 33 response = UrlFetchApp.fetch(scraping_url, get_option); 34 var content = response.getContentText("UTF-8"); 35 36 var topic_block = Parser.data(content).from('class="order-details">').to('</div>').build(); 37 38 //ulタグで囲まれているテキストを抽出 39 var content_block = Parser.data(topic_block).from('<a>').to('</a>').iterate(); 40 41 Logger.log(content_block); 42 43 var regText = /<title>([\s\S]*?)<\/title>/; 44 var html = content.match(regText); 45 46 // Logger.log(html); 47} 48

気になる質問をクリップする

クリップした質問は、後からいつでもMYページで確認できます。

またクリップした質問に回答があった際、通知やメールを受け取ることができます。

バッドをするには、ログインかつ

こちらの条件を満たす必要があります。

guest

回答1

0

自己解決

動的生成されるHTMLをスクレイピングしたい場合はPhantomJsCloudを使うと知り合いからご助言いただいたので、こちらの質問はCloseします。

投稿2022/08/14 09:54

Risney

総合スコア148

バッドをするには、ログインかつ

こちらの条件を満たす必要があります。

あなたの回答

tips

太字

斜体

打ち消し線

見出し

引用テキストの挿入

コードの挿入

リンクの挿入

リストの挿入

番号リストの挿入

表の挿入

水平線の挿入

プレビュー

15分調べてもわからないことは
teratailで質問しよう!

ただいまの回答率
85.47%

質問をまとめることで
思考を整理して素早く解決

テンプレート機能で
簡単に質問をまとめる

質問する

関連した質問