nginxヘルスチェックによりアプリサーバの再起動を行いたい

Question

初心者のため、言葉の不備等ございましたらご指摘頂けると幸いです。

nginx+node.js+expressを使用したSPAの運用をしています。

nginx側設定ではupstreamにより4つのnode(ポート番号での振り分け)へのロードバランサを行なっています。

upstream backend {
    server 127.0.0.1:xxxx;
    server 127.0.0.1:xxxx;
    server 127.0.0.1:xxxx;
    server 127.0.0.1:xxxx;
}

現在 nginx→nodeへの接続が行われなくなるエラーが起きています。
このとき、nodeのプロセスは残存しており、ステータスにも異常が見られません。
暫定対応として、 nginx→nodeへのヘルスチェックを行い、failedとなったプロキシ先nodeプロセスを再起動させたいのですが、良い方法が浮かびません。
どなたか方法ご存知でしたらご教示ください。

各プロキシ先はsystemdでそれぞれサービスとして管理しているため、failedとなったサービスのみを再起動させたいと考えています。

よろしくお願い致します。

Answer 1

俗に言う監視ツール（お好きなもの）を入れて条件に合えば再起動するスクリプトを組めばいいです。
またはリクエストが返らなければ（？）restartするシェル書いてcronで数分置きとか定期実行するぐらいでいいんじゃないでしょうか

ただし、自身でも暫定対応と書かれているように根本の解決にはないっていないので、監視ツールを入れてまで対応するってのも不適切かなと思うのでせいぜいcronで動作するシェルを作るぐらいかな～