質問をすることでしか得られない、回答やアドバイスがある。

15分調べてもわからないことは、質問しよう!

新規登録して質問してみよう
ただいま回答率
85.48%
スクレイピング

スクレイピングとは、公開されているWebサイトからページ内の情報を抽出する技術です。

PHP

PHPは、Webサイト構築に特化して開発されたプログラミング言語です。大きな特徴のひとつは、HTMLに直接プログラムを埋め込むことができるという点です。PHPを用いることで、HTMLを動的コンテンツとして出力できます。HTMLがそのままブラウザに表示されるのに対し、PHPプログラムはサーバ側で実行された結果がブラウザに表示されるため、PHPスクリプトは「サーバサイドスクリプト」と呼ばれています。

XAMPP

XAMPP(ザンプ)は、ウェブアプリケーションの実行に必要なフリーソフトウェアをパッケージングしたApacheディストリビューションです。 XAMPPひとつインストールするだけで、Apache、MySQL、PHP、Perlなどのソフトウェアと、 phpMyAdminなどの管理ツール、SQLiteなどのソフトウェアやライブラリモジュールなどを利用することが可能です。

AWS(Amazon Web Services)

Amazon Web Services (AWS)は、仮想空間を機軸とした、クラスター状のコンピュータ・ネットワーク・データベース・ストーレッジ・サポートツールをAWSというインフラから提供する商用サービスです。

selenium

Selenium(セレニウム)は、ブラウザをプログラムで作動させるフレームワークです。この原理を使うことにより、ブラウザのユーザーテストなどを自動化にすることができます。

Q&A

解決済

3回答

772閲覧

seleniumを使ったPHPアプリのデプロイ

tani3208

総合スコア11

スクレイピング

スクレイピングとは、公開されているWebサイトからページ内の情報を抽出する技術です。

PHP

PHPは、Webサイト構築に特化して開発されたプログラミング言語です。大きな特徴のひとつは、HTMLに直接プログラムを埋め込むことができるという点です。PHPを用いることで、HTMLを動的コンテンツとして出力できます。HTMLがそのままブラウザに表示されるのに対し、PHPプログラムはサーバ側で実行された結果がブラウザに表示されるため、PHPスクリプトは「サーバサイドスクリプト」と呼ばれています。

XAMPP

XAMPP(ザンプ)は、ウェブアプリケーションの実行に必要なフリーソフトウェアをパッケージングしたApacheディストリビューションです。 XAMPPひとつインストールするだけで、Apache、MySQL、PHP、Perlなどのソフトウェアと、 phpMyAdminなどの管理ツール、SQLiteなどのソフトウェアやライブラリモジュールなどを利用することが可能です。

AWS(Amazon Web Services)

Amazon Web Services (AWS)は、仮想空間を機軸とした、クラスター状のコンピュータ・ネットワーク・データベース・ストーレッジ・サポートツールをAWSというインフラから提供する商用サービスです。

selenium

Selenium(セレニウム)は、ブラウザをプログラムで作動させるフレームワークです。この原理を使うことにより、ブラウザのユーザーテストなどを自動化にすることができます。

0グッド

0クリップ

投稿2018/09/06 06:12

前提・実現したいこと

ローカル開発環境(xampp)で作成したスクレイピングアプリをデプロイしたく、
その為に必要なサーバの選定やサービス・ツールなどを教えて頂きたいです。

具体的には、

・phpで書いたプログラムを動かすことが出来る
・seleniumを使える
・スクレイピングの取得結果をデータベース(mysql)に保存できる
・スクレイピングを定期実行できる(cron?)

上記の要件を持ったアプリケーションを稼動させるための
サービスを教えていただきたいです。

###現状
phpとxamppを使ったローカル開発環境にて、
「ページをスクロールするとhtml要素が追加して描画されていくサイト」
のスクレイピングを、seleniumを使って実現するところまではできました。

簡単なUIを作ってデータのエクスポートもできるようになったので、
社内の数人で使用できるよう、どこかにデプロイできればと考えています。

###技術レベル
PHPを勉強し始めて5ヶ月ほどの初学者です。(プログラミング自体が初めて)
学習サイトや書籍等で独学して、
PHPとJSで簡単なアプリが作れるくらいのレベルで
本番環境への移行などサーバ周りの知識については、
恥ずかしながらほとんどありません。

試したこと

手探りながら、さくらのレンタルサーバー(スタンダード)を借りて
サイトをアップロードしてみたのですが
よくよく調べると共用レンタルサーバーでは
seleniumをインストールできない?ことを知りました。

またネットで調べたところ、herokuやAWS等であれば、
プログラムの定期実行やseleniumを使った
アプリのデプロイが出来るのではと模索しているところです。
ただ、AWSはサービスが複雑なようで
要件を満たすには、どのサービスが適当なのか判断できませんでした・・・。

気になる質問をクリップする

クリップした質問は、後からいつでもMYページで確認できます。

またクリップした質問に回答があった際、通知やメールを受け取ることができます。

バッドをするには、ログインかつ

こちらの条件を満たす必要があります。

guest

回答3

0

ベストアンサー

ただ、AWSはサービスが複雑なようで
要件を満たすには、どのサービスが適当なのか判断できませんでした・・・。

AWSでは「EC2」というサービスが、
さくらのVPSのようにGlobalIPつきでサーバを自由にできるサービスです。

AWSは確かにとっつきにくいですが、やってみるとそんなに難しくもないですよ。
インスタンスのグレードは一番利用料が安く無料期間のあるt2.microで始めて、
スペックが足りなければDISKはそのままの状態でスペック変更できます。
OSはとっかえひっかえ色々なものを試せます。
あと、決済はクレジットカードが必須になります。

投稿2018/09/06 09:50

taka-saan

総合スコア665

バッドをするには、ログインかつ

こちらの条件を満たす必要があります。

tani3208

2018/09/06 23:38

ありがとうございます!データベースや定期実行は別のAWSサービスを連携させないといけないと勘違いしていたのですが、それらもEC2で完結できるものなのでしょうか? AWSは初見の用語が多くて避けてしまっていましたが、しっかり検討してみます。
taka-saan

2018/09/07 01:33

> それらもEC2で完結できるものなのでしょうか? 完結できます。普通のVPSと同じと考えてよいです。
tani3208

2018/09/07 02:36

ご回答ありがとうございます。そうなのですね!無償の範囲で触ってみようと思います。
guest

0

さくらのVPSサーバーではどうでしょう?
ほぼ自由に使えると思いますし、グレードも何種類かあるのでいいと思います。

投稿2018/09/06 06:24

taka2063

総合スコア307

バッドをするには、ログインかつ

こちらの条件を満たす必要があります。

tani3208

2018/09/06 23:30

ありがとうございます!通常のレンタルサーバよりも色々と自由に設定できるみたいですね。お恥ずかしながらVPSを知らなかったので詳しく調べてみようと思います。
guest

0

アドバイスを頂いてから「さくらVPS」の2Gプランで環境構築しました。

selenium周りのソフトウエアとその互換性(バージョンとか)でだいぶ苦戦しましたが、
ネットで情報を集めてなんとかアプリケーションを動かすことができました!

ただし、サーバの基礎知識的なところがほとんどなかったので、
マシンスペックが足りなそうなことにデプロイ後に気づいたり、
セキュリティ面では、サーバ立ち上げして数日で不正アクセスに狙われたりで
今後も苦労が続きそうです・・・。

ご回答くださったお二方、どうもありがとうございました!

投稿2018/10/05 08:55

tani3208

総合スコア11

バッドをするには、ログインかつ

こちらの条件を満たす必要があります。

あなたの回答

tips

太字

斜体

打ち消し線

見出し

引用テキストの挿入

コードの挿入

リンクの挿入

リストの挿入

番号リストの挿入

表の挿入

水平線の挿入

プレビュー

15分調べてもわからないことは
teratailで質問しよう!

ただいまの回答率
85.48%

質問をまとめることで
思考を整理して素早く解決

テンプレート機能で
簡単に質問をまとめる

質問する

関連した質問