CloudWatch Alarm'suz Production

Dashboard güzeldi. p95, 5xx, CPU. Gece kimse açmadı. Sabah kullanıcı yazdı. Grafikte dik yokuş duruyordu; yokuşu gören yoktu.

Üç alarm

Beş yüz. RestartCount. Disk veya bağlantı havuzu — hangisi sizin boğazınızsa. Üçü de eşikli. Eşik yoksa alarm değil, süs. 'Gürültü olmasın' diye eşiği o kadar yükseğe çekmek, alarmı kapatmakla aynı.

resource "aws_cloudwatch_metric_alarm" "http_5xx" {
  alarm_name          = "app-5xx"
  comparison_operator = "GreaterThanThreshold"
  evaluation_periods  = 2
  metric_name         = "HTTPCode_Target_5XX_Count"
  namespace           = "AWS/ApplicationELB"
  period              = 60
  statistic           = "Sum"
  threshold           = 10
  alarm_actions       = [aws_sns_topic.ops.arn]
}

SNS bir e-posta listesi olabilir, bir sohbet kanalı olabilir. Önemli olan gece giden yolun dolu olması. Kubernetes'te kube_pod_container_status_restarts_total Prometheus'ta duruyorsa CloudWatch'a taşımak zorunda değilsiniz; durmuyorsa ELB 5xx tek başına kör. Alarm'suz production, slayttaki DR ile akraba: bakılınca var, bakılmayınca yok.