複数実行されても処理は1つだけに制限する方法

Question

FTPサーバーにファイルを送信する処理の実装で悩んでいます。
PHPを使って処理しています。

やりたいことは画面からのリクエストでデータベースを更新するcsvファイルを作成し、FTPサーバーにアップロードするだけですが以下の制約があります。

・アップロードするファイル名は固定（main.csvとoption.csvの2種類）
・ファイルは1つずつ送信する必要がある
・1つのファイルが処理されるのに1分～10分程度かかる場合がある（サーバーの状態による）

複数のリクエストが同時に発生することがありますが、この制約により順番に1件ずつ処理しないといけません。

処理のイメージとしては画面からのリクエストで処理をデータベースに登録して、別にアップロードを行う処理をcronで定期的に起動し、順番に実行していくのかと思います。

ただしアップロード処理に時間がかかる場合があるため前の処理が実行中に次の定期実行が行われてしまうことが考えられます。
アップロードを行う処理は1つだけしか実行して欲しくないのをどうやって実現すればいいか悩んでいます。

実行前にデータベースに処理中フラグを立て、処理が終了したらフラグを消す方法しか思いつかないのですが、他にいい方法はないでしょうか？

PHPで特定の処理が実行中かどうかを知る方法というのはあるでしょうか？

よろしくお願い致します。

追記

二重起動対応にご回答いただいたpsコマンドやロックファイルが使われるみたいですね。

こちらのQiita記事にもまとめてありました。
http://qiita.com/n0bisuke/items/ad7c37d68ff0d5b87742

言葉を知らないとこういう記事を見つけられないので本当に助かります。。

Answer 1

常に待ち行列があるレベルじゃなくて、「たまに重なるかも」というレベルであれば、DBに書くとかじゃなくて、排他制御をして時間待ちをしながら送ればいいと思います。

Comments

[msx2]

確かに難しく考えすぎだったかも知れませんね
アップロードを行う処理を落ちないように丁寧に作れば大丈夫そうでした。
ありがとうございます。

[otn]

すいません。この回答、別の質問への回答だったのですが、何故か間違えて投稿してしまいました。
本来するつもりだった回答は、下記です。

待ち行列が途切れないようなケースではなく、たまに実行が重なるかも、という程度であるなら、排他制御をして、ロックが取れるまで時間待ちをすればいいと思います。

[msx2]

大丈夫ですw
またよろしくお願いします。

Answer 2

処理開始時に処理中を示すファイル（固定ファイル名）を生成して、
処理終了時に削除する、のはいかがでしょうか。

一度に複数のアクセスが有るな話ではなさそうだし、
完全に自分の管理下で行う処理のようなので、
そんなので十分かと思いました。

固定ファイル名に、
例えば処理開始日時をファイルに出力しておくと、
そのファイルを参照するphp処理で
経過時間もわかるわけです。

Comments

[msx2]

なるほど！アイデア的にはデータベースに状態を持たせるのと似ていますがファイルを使う方が安全ですね。
あまりに時間が経過し過ぎていたら破棄することもできますし。
いつもありがとうございます。

Answer 3

phpでftpのアップロードをやる意味があるのでしょうか？
とくに10分も待たされる可能性があるならタイムアウトしそうですし
向いているとは思いません。
なんらかのコマンドライン系のftpクライアントで処理するのが
賢明だとおもいます。

ファイルは1つずつ送信する必要がある

の仕様についてはFTPの仕組み上あまり意味がないと思いますが
コマンドライン系の処理なら順番にputを指定してやれば
並行処理にはならないと思います

Comments

[msx2]

送信するファイル名が固定されているので複数送信するとcsvファイルが上書きされてしまうのです。
csvファイルでしか連携できない謎のシステムで送信先の仕様なので従うしかない状況なんです。。

ちなみに送信したcsvファイルは相手のサーバー上で処理されると自動的に削除されるので、ファイルが消えるのを待って次のファイルを送ります。

Answer 4

仕様に不明な点もありますが、勝手な考えで書いてみます。

前提
・画面からのリクエストデータにデータベースを更新する「何か」が入っている。

●画面からのリクエスト処理
１．リクエストがあったら、リクエストの中の「何か」をファイルに書き出す。
ファイル名は一意にするために、例えば「yyyymmddHHMMSS_[セッションID].txt」にする
※リクエストがあるたびにファイルは増えていきます。

●FTP処理
cronにより定期的に実行される
１．起動時にpsコマンドで自分（自分と同じ名前の処理がいるか）を確認する。
※cronから起動するプログラム名がftp.shであればpsコマンドでftp.shが存在することを確認する。
いれば、処理中と解釈し処理は終了する。
いない場合は、処理を継続する（２へ）
２．相手サーバ上にmain.csv,option.csvが存在しないことを確認
存在する場合は終了
存在しない場合は処理を継続する（３へ）
３．リクエストがあった際に作成された複数のファイルを古い順に読み込み、
「何か」をmain.csvやoption.csvに書き出す。
４．ftpでmain.csvとoption.csvを送信
５．ftp送信に成功したらリクエストファイルを削除する。
※３で読み込んだファイルのみが対象
６．終了

Comments

[msx2]

psコマンド！！こんなコマンドがあったんですね。
まさにやりたい内容です！

全てのファイルを送信してしまいたいので
・2番のサーバー上にファイルが存在する場合は終了せずに再確認を繰り返して3に進む
・5番が完了したら2番に戻る（送信対象がなくなるまで）

これで何とか問題を解決できると思います。
ご回答ありがとうございました！