ระบบ production ต้องติดตามอะไรนอกจาก accuracy รายเดือน — หากเปรียบเทียบสองแนวทาง ข้อใดมีเหตุผลรองรับเหมาะสมกว่า
กเลือกแนวทางที่สอดคล้องกับหลักว่า คุณภาพข้อมูล drift เมตริกแยกกลุ่ม calibration latency และผลกระทบ/เหตุขัดข้อง
ขเลือกข้อเสนอที่ระบุว่า ติดตามเฉพาะ distribution ของคะแนนทำนาย และไม่ตรวจความไวของผลต่อสมมติฐานที่ใช้
คเลือกข้อเสนอที่ระบุว่า ตรวจเฉพาะ feature drift โดยไม่เก็บ operational failures โดยใช้เกณฑ์เดียวตัดสินโดยไม่เทียบ baseline
งเลือกข้อเสนอที่ระบุว่า นับจำนวนคำขอและ latency โดยไม่แยกคุณภาพข้อมูลหรือผลกระทบ และไม่แยกข้อมูลสำหรับประเมินผลสุดท้าย
เฉลยอธิบาย
AI RMF 1.0 pp. 23, 28, 32-38 อธิบายว่ากรอบ NIST กำหนดให้ตรวจ representativeness, bias, data quality, ผลกระทบแยกกลุ่ม และติดตามความเสี่ยงหลังใช้งานพร้อมกลไกรับ feedback เมื่อนำมาใช้กับโจทย์จึงต้องเลือก “เลือกแนวทางที่สอดคล้องกับหลักว่า คุณภาพข้อมูล drift เมตริกแยกกลุ่ม calibration latency และผลกระทบ/เหตุขัดข้อง” ส่วนตัวเลือกอื่นใช้ข้อมูลผิดช่วง เลือกเมตริกไม่ตรงเป้าหมาย หรือข้ามการตรวจผลกระทบที่จำเป็น