Alerty, które nie budzą w nocy bez powodu: progi, deduplikacja i eskalacja
Dwieście alertów dziennie oznacza, że nikt nie czyta żadnego. Jak zaprojektować alerty tak, by każdy wymagał działania, a ten o trzeciej w nocy naprawdę był tego wart.
Monitoring odpowiada na pytanie, czy coś działa. Obserwowalność odpowiada na pytanie, dlaczego nie działa. Piszę o strategii zbierania logów i metryk, o alertach, które nie budzą w nocy bez powodu, i o kosztach przechowywania danych, o których nikt nie myśli na początku.
Dwieście alertów dziennie oznacza, że nikt nie czyta żadnego. Jak zaprojektować alerty tak, by każdy wymagał działania, a ten o trzeciej w nocy naprawdę był tego wart.
Zbieranie wszystkiego co sekundę daje tysiące szeregów czasowych i zero odpowiedzi. Mały zestaw metryk, który odpowiada na pytania „czy działa” i „dlaczego nie”, plus zasady, jak je przechowywać.
Centralny system logów bez strategii zamienia się w drogi magazyn szumu. Jak zdecydować, które zdarzenia trafiają do centrali, w jakiej formie i na jak długo.