AWS CloudWatch メトリクスを使用した通知について

Question

以下、２つのサービスの異常を検知しSlackに通知したいです。

• Lambda functions
• CloudWatch Events(cron)

Lambdaも複数あり、CloudWatch Eventsも複数設定してあります。
※CloudWatch Eventsはcron式で設定されており、複数ありますが、実行順序は気にしないものとしています。
※今回の異常としては、Lambdaはfailのみ。CloudWatch Eventsは、スケジュール通りに実行されたが、failになった場合です。

######試したこととして、
いずれもCloudWatchのアラームを設定すれば、SNSを経由してLambdaでSlack通知できそうなのはわかりました。

######そこで、疑問に思ったことが、
Lambda毎にアラームを作成すると、今回のように複数functionがある場合、アラームが大量生産されてしまうこと。
同様に、CloudWatch Eventsも複数あるので、アラームを設定する際に、CloudWatch Eventsの数だけアラームが作成されてしまうことでした。

なので、アラーム作成時に選択するメトリクスが１つであれば、
Lambda用に１つ、CloudWatch Events用に１つでアラームが合計２つで済むのではと思っています。

######困っていること
ただ、コンソールでメトリクスのページを触ってみたりしていたのですが、集約することができずにいます。
ググってもみたのですが、CloudWatch Events自体の異常検知方法がヒットせず困っております。

知識が浅はかで恐縮ですが、メトリクスをまとめる方法+そのメトリクスを基準としてアラーム設定する方法の記事や手順をご教授していただけますでしょうか。

また、もっと楽に設定できる方法などありましたら、教えて頂けますと嬉しいです。

よろしくお願い致します。

Answer 1

今回のように複数functionがある場合、アラームが大量生産

おそらく、複合アラームを設定すればやりたいことが実現できないことはないと思います。
複合アラームの作成
しかし、仮にできたとしてもまとめないほうがいいんじゃないですかね…。
まとめてしまうと、どのLambda Functionでエラーになったのがすぐには判別できないと思います。
複数設定したものが複数落ちた、ということはそれ自体が情報なので、まとめることによってあるLambda Functionが落ちたという情報が欠落してしまうことが懸念されます。
エラーがきちんと検知できなくなっては本末転倒でしょう。
それとも、一つのLambda Functionが落ちた場合常に複数のLambda Functionが落ちるような使い方をしているということでしょうか？
それであれば、そもそもまとめないで必要なLambda Functionのみエラー通知させればいいだけかなと思います。

アラーム作成時に選択するメトリクスが１つであれば、

メトリクスはLambda Functionごとに存在するので、それは実質1つのLambda Functionにしかアラームを設定していないことになると思います。

CloudWatch Events自体の異常検知方法が

これはちょっと何がしたいのかわかりません。
異常検知サービスに対する異常検知をするのは現実的ではないでしょう。

CloudWatchアラームをSlackに通知する場合、Lambda Functionを経由する方法も多数出てきますが、今だとAWS Chatbotを使うと簡単です。
ついに来た！　AWS Chatbot が一般公開(GA)になりました！　Slack連携が捗ります！
AWS Chatbotで簡単にSlack通知!!&通知例いろいろ

また、CloudWatchアラームでLambdaのErrorsをトリガーにしてアラームを発生させるほか、Lambda Functionそのものに例外処理を入れて、途中でエラーが発生した場合に何かしら通知をさせてもいいでしょう。

Comments

[xxyyxx]

ご回答ありがとうございます！！
非常に参考になります！！

Lambdaに関しては、たしかにすべてのLambdaを異常検知というのは現実的でない気がしましたので、
必要なfunctionのみの検知が良さそうでした。

CloudWatch Eventsについて、
そうなのです。。異常検知サービスに異常検知はおかしいのですが、、、
どうしてもスケジュールされたイベントが実行できなかったのを検知するための方法は、AWSサービスで完結させたい場合なにかありますでしょうか？、、

[yu_1985]

> すべてのLambdaを異常検知というのは現実的でない

いや、そんなことはないと思いますよ。それぞれ設定すればいいだけなので。
数が多いならコード化するなり、工夫をすればいいのです。
設定の基準は楽かどうかよりも、必要かどうかです。

> どうしてもスケジュールされたイベントが実行できなかったのを検知するための方法は、AWSサービスで完結させたい場合なにかありますでしょうか？

難しいです。
AWSのサービスがどうこうよりも、まず何をもって「イベントが実行できなかった」と定義するのかを決められないと検知ができません。
サービスのことは忘れて、まず「イベントが実行できなかった場合何が起こるか/どうなっているか」を考えて、その状態を監視することを考えましょう。
どうやって監視するかはその後の話です。