บันทึกผลพยากรณ์เพื่อวิเคราะห์ภายหลัง

หากคุณไม่เคยเก็บสิ่งที่โมเดลเห็นและให้ผลลัพธ์ไว้ คุณก็จะวิเคราะห์หาสาเหตุภายหลังไม่ได้ การบันทึกการทำนายคือรากฐานของการวิเคราะห์ทั้งหมด 📝

บันทึกการทำนายที่มีประโยชน์จะเก็บคุณลักษณะอินพุต เอาต์พุตของโมเดล รุ่นของโมเดล และเวลาประทับสำหรับทุกคำขอ

กำหนดรหัสคำขอที่ไม่ซ้ำกันให้การทำนายแต่ละครั้ง ต่อมาเมื่อผลลัพธ์จริงมาถึง คุณจะเชื่อมผลลัพธ์นั้นกลับไปยังอินพุตเดิมด้วยรหัสดังกล่าว

เก็บคุณลักษณะไว้พร้อมกับผลการทำนายเสมอ คะแนนที่ไม่มีอินพุตจะบอกไม่ได้ว่าเหตุใดโมเดลจึงตัดสินใจเช่นนั้น

กำกับบันทึกทุกฉบับด้วยรุ่นของโมเดลที่สร้างบันทึกนั้น หลังจากนำรุ่นใหม่ออกใช้งาน คุณจะเปรียบเทียบพฤติกรรมเก่าและใหม่เคียงข้างกันได้

เขียนบันทึกเป็น JSON แบบมีโครงสร้าง ไม่ใช่ข้อความอิสระ จากนั้นเครื่องก็จะสืบค้น กรอง และรวมผลการทำนายของคุณได้โดยอัตโนมัติ

โดยทั่วไปผลการทำนายจะไหลเข้าสู่คลังเก็บการทำนาย ซึ่งอาจเป็นฐานข้อมูล คลังข้อมูล หรือทะเลสาบข้อมูลที่สร้างขึ้นเพื่อเก็บประวัติซึ่งสืบค้นได้และมีต้นทุนต่ำ

เขียนบันทึกแบบไม่พร้อมกัน เพื่อไม่ให้การเก็บระเบียนทำให้การตอบสนองที่ผู้ใช้กำลังรอช้าลง

บันทึกอาจมีข้อมูลส่วนบุคคล ดังนั้นให้ใช้กฎด้านความเป็นส่วนตัว เช่น แฮชตัวระบุ ลบฟิลด์ที่ละเอียดอ่อน และกำหนดระยะเวลาเก็บรักษา

เมื่อป้ายกำกับจริงมาถึง ให้เชื่อมป้ายกำกับเหล่านั้นกับบันทึกด้วยรหัสคำขอ การเชื่อมนี้ทำให้คุณวัดความแม่นยำจากการใช้งานจริงย้อนหลังได้

เมื่อระบบมีขนาดใหญ่มาก ให้บันทึกตัวอย่างที่เป็นตัวแทนแทนการบันทึกทุกคำขอ เพื่อควบคุมพื้นที่จัดเก็บและต้นทุน

บันทึกการทำนายทุกครั้งพร้อมอินพุต เอาต์พุต รุ่น และรหัสคำขอ ประวัติแบบมีโครงสร้างนี้คือสิ่งที่การวิเคราะห์ในภายหลังทุกอย่างต้องอาศัย ✅