แจ้งเตือนเมื่อเกิดความล้มเหลวหรือการใช้งานในทางที่ผิด

แดชบอร์ดจะช่วยได้ก็ต่อเมื่อมีคนกำลังดูอยู่ การแจ้งเตือนเปลี่ยนหลักการนี้ โดยให้ระบบบอกคุณทันทีที่มีสิ่งใดผิดปกติ 🔔

มุ่งการแจ้งเตือนไปที่ อาการที่ผู้ใช้พบ เช่น อัตราข้อผิดพลาดสูง แทนที่จะแจ้งเตือนทุกความผันผวนภายใน วิธีนี้จะรักษาสัญญาณที่สำคัญให้มากและเสียงรบกวนให้น้อย

การแจ้งเตือนต้องมี เกณฑ์ที่ชัดเจน เช่น ให้ทำงานเมื่ออัตราข้อผิดพลาดเกินห้าเปอร์เซ็นต์ เส้นแบ่งนี้เปลี่ยนค่าชี้วัดให้กลายเป็นการตัดสินใจแบบใช่หรือไม่ใช่

ประเมินเกณฑ์ภายใน ช่วงเวลา เช่น ห้านาที การเรียกที่ผิดพลาดเพียงครั้งเดียวไม่ควรทำให้คุณต้องรับแจ้งเตือน แต่การเพิ่มขึ้นอย่างต่อเนื่องควรทำให้แจ้งเตือน

ความช้าก็เป็นความเสียหายรูปแบบหนึ่ง ให้แจ้งเตือนเมื่อ ความหน่วง p99 สูงเกินงบประมาณของคุณ เพราะเซิร์ฟเวอร์ที่ค้างทำร้ายผู้ใช้ไม่ต่างจากเซิร์ฟเวอร์ที่เกิดข้อผิดพลาด

การเรียกที่พุ่งขึ้นอย่างฉับพลันอาจหมายถึงโมเดลที่ทำงานวนไม่หยุดหรือผู้โจมตี ให้แจ้งเตือนเมื่อพบ ปริมาณการรับส่งที่ผิดปกติ เพื่อจับการใช้งานในทางที่ผิดก่อนจะใช้งบประมาณของคุณจนหมด 🚨

ใช้การแจ้งเตือนคู่กับ การจำกัดอัตรา: จำกัดจำนวนการเรียกต่อไคลเอ็นต์ เพื่อควบคุมการใช้งานในทางที่ผิดระหว่างที่คุณตรวจสอบ แทนที่จะปล่อยให้ระบบปลายทางล่มเสียก่อน

แม้แต่การตรวจสอบตัวนับพื้นฐานก็สามารถแจ้ง การพุ่งขึ้นได้ เมื่อจำนวนการเรียกภายในช่วงเวลาหนึ่งสูงเกินค่าปกติของคุณมาก

การแจ้งเตือนจะมีประโยชน์ก็ต่อเมื่อไปถึงมนุษย์ ส่งไปยัง ช่องทางจริง เช่น อีเมล Slack หรือเพจเจอร์ที่มีคนเฝ้าดูอยู่จริง

สัญญาณเตือนที่ผิดพลาดมากเกินไปจะทำให้ผู้คนเคยชินกับการเพิกเฉยต่อการแจ้งเตือน ปรับเกณฑ์ให้แต่ละการแจ้งเตือนเป็นเหตุการณ์จริง เพราะ ความล้าจากการแจ้งเตือนทำให้พลาดเหตุขัดข้องได้

แนบ คู่มือรับมือเหตุการณ์สั้น ๆ ไว้กับการแจ้งเตือนแต่ละรายการ โดยระบุว่าหมายถึงอะไรและควรทำขั้นตอนแรกใด ผู้รับผิดชอบจึงลงมือได้ภายในไม่กี่วินาที ไม่ใช่หลายนาที

ตอนนี้คุณสามารถแจ้งเตือนจาก อาการจริงได้แล้ว ได้แก่ อัตราข้อผิดพลาด ความหน่วง และการใช้งานในทางที่ผิด โดยปรับด้วยช่วงเวลาและคู่มือรับมือเหตุการณ์ เพื่อให้ทุกการแจ้งเตือนมีความสำคัญอย่างแท้จริง ✅