Memberi Peringatan atas Kegagalan dan Penyalahgunaan

Dasbor hanya membantu ketika ada orang yang melihatnya. Pemberian peringatan membalik keadaan: sistem memberi tahu Anda saat sesuatu mengalami masalah. 🔔

Arahkan peringatan pada gejala yang dirasakan pengguna, seperti tingkat error yang tinggi, bukan pada setiap gangguan internal. Dengan begitu, sinyal tetap kuat dan kebisingan tetap rendah.

Sebuah peringatan memerlukan ambang yang jelas: aktifkan ketika tingkat error melewati, misalnya, lima persen. Garis ini mengubah metrik menjadi keputusan ya atau tidak.

Nilai ambang dalam jendela waktu, misalnya lima menit. Satu panggilan yang buruk seharusnya tidak mengirimkan halaman peringatan kepada Anda, tetapi lonjakan yang terus berlangsung seharusnya demikian.

Kelambatan juga merupakan bentuk kerusakan. Berikan peringatan ketika latensi p99 melewati anggaran Anda, karena server yang macet sama-sama merugikan pengguna seperti server yang menghasilkan error.

Banjir panggilan yang tiba-tiba dapat berarti model yang tidak terkendali atau serangan. Berikan peringatan atas lalu lintas yang tidak normal agar Anda mendeteksi penyalahgunaan sebelum menghabiskan anggaran. 🚨

Pasangkan peringatan dengan batas laju: batasi jumlah panggilan per klien agar penyalahgunaan terkendali saat Anda menyelidikinya, alih-alih membebani backend terlebih dahulu.

Bahkan pemeriksaan penghitung sederhana dapat menandai lonjakan ketika jumlah panggilan dalam suatu jendela jauh melampaui garis dasar normal Anda.

Peringatan hanya berguna jika sampai kepada manusia. Kirimkan ke saluran nyata seperti email, Slack, atau pager yang benar-benar dipantau seseorang.

Terlalu banyak alarm palsu membuat orang terbiasa mengabaikan peringatan. Sesuaikan ambang agar setiap halaman peringatan benar-benar penting; kelelahan akibat peringatan menyebabkan gangguan layanan terlewatkan.

Tambahkan panduan penanganan singkat pada setiap peringatan: jelaskan artinya dan langkah pertama yang harus dilakukan. Dengan begitu, petugas dapat bertindak dalam hitungan detik, bukan menit.

Sekarang Anda dapat memberikan peringatan berdasarkan gejala nyata: tingkat error, latensi, dan penyalahgunaan lalu lintas, yang disesuaikan dengan jendela waktu dan panduan penanganan agar setiap halaman peringatan benar-benar penting. ✅