定期的に実行するプログラムをどのように実現できますか

Question

前提・実現したいこと

現在情報系の大学でプログラミングを学びながら、ウェブ系のベンチャーでインターンをしています
様々な知識をつけていくなかで、実際に自分の手であたらしいウェブアプリをつくりたいとおもったのですが、すべて自分一人でやるとなるとあまりにも知識・経験が不足しています　
フロントの作業が多かったので、バックエンドを具体的に動かすための方法がわからないのでそれについて質問したいです
作成したいアプリは、複数のウェブサイトからデータを取得しデータベースを定期的に更新し、そのデータをつかってViewが変化するものを想定しています
サーバーをかりたアプリを作った経験もない素人なので、初歩的なところからでも教えていただけるとありがたいです

質問内容

• データベースを定期的に実行するプログラムはどのようにして実現できますか？　
  予想ですが、そのプログラムはデータベースサーバーとは別のサーバーで動かすことになると考えます　常駐して動作していて、適宜データベースサーバーに更新をかけるようなイメージをしています　ぐぐるとUnix系のcronというデーモンプロセスを使用すると実行の日時指定ができると書いてあったので、これを利用するのかと思ったのですが、そもそも借りたサーバーのデーモンプロセスの設定を変えることになるのでしょうか、Dockerなど使用すると解決できるのでしょうか

全くの見当違いであったらぜひ方法を教えてほしいです

Answer 1

そもそも借りたサーバーの

仕様次第です。Dockerと仰っていますが、そもそもDockerが入れられるかどうかもサーバーの仕様次第です。cronが使えないレンタルサーバーもあるでしょう。
ある程度自由にしたいのでしたら、レンタルサーバーよりもVPS契約したほうが良いと思います。
練習がてらなら仮想環境構築して遊ぶも良し（何かあっても作りなおせば良いし仮想なのでその中だけの出来事におさめられる）。いずれにしてもやってみるところから。
想定されているのがインフラ側の話のように見えますが、「アプリ」の使い方からアプリケーション側の話をしたいのか、どちらなのか分からないですが、もう一歩ずつ踏み込んでみれば見えてくることもあるかもしれません。

単にWebアプリを作りたい、学習したいのであれば「定期実行」がどう繋がるのか今一つ分かりませんでした。
「Web」となるとケースバイケースですが、半分くらいはフロント側の話ですし、「定期実行」に特化するなら画面関係ないのでバックエンドのみの話です。

しかしながら「複数のウェブサイトからデータを取得し」というところが引っかかります。
スクレイピングの類を想定しているのであれば、対象サイトがスクレイピングを許可しているかきちんと下調べをしておかないと訴えられても文句は言えませんし、APIとしてもどれくらいのアクセスを許可しているかは調べる必要があるでしょう。

予想ですが、そのプログラムはデータベースサーバーとは別のサーバーで動かすことになると考えます　

別にデータベースとアプリケーションは別である必要はありません。

常駐して動作していて、適宜データベースサーバーに更新をかけるようなイメージをしています

「常駐して動作」だと「定期的に実行」とはならないのではないでしょうか。
調べて出てきた「cron」は「指定した期間・時間にプログラムを起動させる」機能です。
ONタイマーみたいなものですが「常駐」とは違うように思います。

ぐぐるとUnix系のcronというデーモンプロセスを使用すると実行の日時指定ができると書いてあったので、これを利用するのかと思ったのですが、そもそも借りたサーバーのデーモンプロセスの設定を変えることになるのでしょうか、Dockerなど使用すると解決できるのでしょうか

なんだろう、**まずなんでもいいので手を出してみてください。**としか言えません。
１つのことを実現するための手段は１つではないので、様々考えられる手段から取捨選択できた方が、より良い方法を選べます。

それに

サーバーをかりたアプリを作った経験もない素人なので、初歩的なところから

なら、むしろ選び放題でしょう。
「何からやったら」というところを考えていては何も手を出せないので、
まずは思うようにやってみてください。

今、実は、何も問題が起きてないのです。
失敗から学ぶことのほうが多いです。プログラミングに限らず。
まず、失敗してください。そこからまた質問してください。

Comments

[退会済みユーザー]

色々と参考になる回答ありがとうございます
確かに絞られた内容の質問ではなく、ざっくりしているのは自覚しています
しかしどのようにしたら実現できるのかが何も分かっていない状態なので、その方法をひとつでもいいから提示していただきたかったです

[m.ts10806]

何も見えないのでしたら、それはそこに手を付ける段階ではないとも言えます。
書いてますように、「まずなんでもいいので手を出してみてください」です。
何も手を出してない段階から大きなことを考えることは出来ませんよ。そりゃ、実現する手段も何も見えないわけです。
手段先行なのも今の状態を引き起こしている要因です。「なにを」「なぜ」といったところを詰めるのも必要です。でないと手段も決まりません。

[退会済みユーザー]

的外れなことしか言わないならコメントしないでください

[m.ts10806]

私の回答を的外れと言えるほどご存知なら質問する必要はないですよ。
「全くの見当違いであったらぜひ方法を教えてほしいです」は単なる置き物ですか？

[退会済みユーザー]

方法を一つも提示しないなら的外れですだまってください

[m.ts10806]

幾つか提示しています。回答読んでから言ってください。
「質問者が欲するものが全て」と思ってたら大間違いです。
お客様したいのでしたらどうぞ業者へご依頼ください。
本回答が複数の高評価を得られていることから、質問には答えており的はずれではないということになります。

[Zuishin]

方法は提示されています。

> ある程度自由にしたいのでしたら、レンタルサーバーよりもVPS契約したほうが良いと思います。

レンタルサーバーの場合、個々の機能の差が大きいので、どの方法が使えるということは言えません。cron が使いたいなら使えるサーバーと契約すればいいだけで、ここで質問する意味はありません。

Answer 2

自分のPCにVMwareでもVirtualBoxでもインストールして、「Dockerを使わずに」Linuxディストリビューションをインストールすることをお薦めします。インターネットからは簡単に仮想マシンには到達できないようにしておきましょう。何かまずいことをやらかしたときのために、仮想マシンのコピー(クローン)は取っておくといいですね。

そこなら、cronで何かを動かしたり、各種サーバーの構築・設定・管理を試すなり自由にできます。外部に発信するものでなければ迷惑はかかりません。自分で立てたWebサーバーに対して何でも好きにすればいい。

Answer 3

データベースを定期的に実行するプログラムはどのようにして実現できますか？

「データベースを実行」の意味が分かりませんが、文脈から「データベースの更新」だと思って回答します。chronでもできますし、言語ごとにも何かあるでしょう。Pythonなら「Python 定期実行」、JavaScriptなら「JavaScript 定期実行」など、あなたの使う言語で検索してください。

借りたサーバーのデーモンプロセスの設定を変えることになるのでしょうか

サーバを借りてcronを使うならそうです。

Dockerなど使用すると解決できるのでしょうか

「解決」の意味が分かりませんが「借りたサーバーのデーモンプロセスの設定を変え」ることなくcronが使えるかという意味なら、たぶん使えると思います。