質問をすることでしか得られない、回答やアドバイスがある。

15分調べてもわからないことは、質問しよう!

新規登録して質問してみよう
ただいま回答率
85.50%
JavaScript

JavaScriptは、プログラミング言語のひとつです。ネットスケープコミュニケーションズで開発されました。 開発当初はLiveScriptと呼ばれていましたが、業務提携していたサン・マイクロシステムズが開発したJavaが脚光を浴びていたことから、JavaScriptと改名されました。 動きのあるWebページを作ることを目的に開発されたもので、主要なWebブラウザのほとんどに搭載されています。

CasperJS

CasperJSはJavaScriptで実装されたPhantomJSのユーティリティで UIテスト向けのJavaScript フレームワークです。

Q&A

1回答

637閲覧

casperjsで特定のサイトがopenできない

kobayacy

総合スコア0

JavaScript

JavaScriptは、プログラミング言語のひとつです。ネットスケープコミュニケーションズで開発されました。 開発当初はLiveScriptと呼ばれていましたが、業務提携していたサン・マイクロシステムズが開発したJavaが脚光を浴びていたことから、JavaScriptと改名されました。 動きのあるWebページを作ることを目的に開発されたもので、主要なWebブラウザのほとんどに搭載されています。

CasperJS

CasperJSはJavaScriptで実装されたPhantomJSのユーティリティで UIテスト向けのJavaScript フレームワークです。

0グッド

1クリップ

投稿2021/12/31 13:11

前提

UbuntuにphantomJSとcasperJSをインストールして管理画面の操作をしています。

発生している問題

特定のサイトに対し、casper.openができなくなってしまいました。
例えば下記のコードは普通にgoogle.comのソースを表示します。

var casper=require('casper').create({ viewportSize:{ width: 1920, height: 1080 } ,pageSettings: { userAgent: 'Mozilla/5.0 (Macintosh; Intel Mac OS X 10.13; rv:95.0) Gecko/20100101 Firefox/95.0' } }); casper.start(); casper.then(function(){ url='https://www.google.com/'; this.open(url); }); casper.then(function(){ html=this.getHTML(); this.echo(html); }); casper.run();

ところが

url='http://shop.fuzoku-datacenter.com/';

とすると長時間待たされた結果、

<html><head></head><body></body></html>

と返されてしまいます。
userAgentを色々変えてみたり、casper.page.onAlertやcasper.page.onConfirmの可能性も試してみましたがうまく行きません。
どうしたら良いか、ご教示いただけたらありがたいです。

環境

Ubuntu 18.04.1 LTS
phantomJS 2.1.1
casperJS 1.1.4

以上、よろしくお願いいたします。

気になる質問をクリップする

クリップした質問は、後からいつでもMYページで確認できます。

またクリップした質問に回答があった際、通知やメールを受け取ることができます。

バッドをするには、ログインかつ

こちらの条件を満たす必要があります。

guest

回答1

0

これはGCPで作った環境です。
過去にAWSにphantomJS+casperJSの環境を作ったことがあるのでそちらで試してみたところうまく行きました。
バージョンを調べてみたら
phantomJS=1.9.7
casperJS=1.1.2
でした。

投稿2022/01/03 12:27

編集2022/01/03 13:18
kobayacy

総合スコア0

バッドをするには、ログインかつ

こちらの条件を満たす必要があります。

kobayacy

2022/01/04 19:27

バージョンにかかわらず、GCPからは不可、AWSからは可能でした。 IPの範囲で制限がかけられたのかもしれません。
kobayacy

2022/01/06 17:27

AWSに移行してしばらくはうまく行きましたが、またアクセスできなくなりました。そしてIPを変えたらうまく行きました。
kobayacy

2022/01/07 08:00 編集

対象サイトのサポートに問い合わせたところ、Dos攻撃対策で特定IPからはアクセスできないようになったらしいです。
kobayacy

2022/01/07 14:53

ということで使えるIPにプロキシサーバーを建てて対応しました。
guest

あなたの回答

tips

太字

斜体

打ち消し線

見出し

引用テキストの挿入

コードの挿入

リンクの挿入

リストの挿入

番号リストの挿入

表の挿入

水平線の挿入

プレビュー

まだベストアンサーが選ばれていません

会員登録して回答してみよう

アカウントをお持ちの方は

15分調べてもわからないことは
teratailで質問しよう!

ただいまの回答率
85.50%

質問をまとめることで
思考を整理して素早く解決

テンプレート機能で
簡単に質問をまとめる

質問する

関連した質問