CPUの使用率が突然上がりssh接続できなくなる

Question

AWSのlightsailで稼働させているubuntuのCPU使用率が突然跳ね上がり、稼働させているシステムが止まりました。
ここ数ヶ月動かしていて二度ほど同じ事象が突然起きました。

CPU使用率が上がっている間はssh接続もできませんでした。

ひとまずサーバーを再起動することで復帰しました。
できればサーバーを落とさずにssh接続して何が起きているか確認したいです。

事象が発生したタイミングで稼働させているシステムやサーバーを操作したわけではなく原因は不明です。
急にCPU使用率が変わってしまうことはよくあることなのでしょうか？
避ける方法はあるのでしょうか？

Answer 1

情報が少ないのであくまで予想ですが、メモリが不足した可能性があります。
メモリが不足するとOOM Killerというプロセスが起動するのですが、これがCPUをほぼ使い尽くします。

sudo grep -i "Out of memory" /var/log/syslog

を実行してみて、何か行が検出されたらメモリ不足が原因です。
これはsyslogからOOM Killerが動作したログを検出するコマンドです。

メモリ不足であれば、メモリ消費を抑えるようにするか、もっとメモリが多いインスタンスにアップグレードしてあげる必要があります。

Comments

[moriyo]

ありがとうございます。上記コマンドを実行してみると、まさしくOOM Killerにより駆逐されていました！
メモリを上げることを検討します。