ระบบ production ต้องติดตามอะไรนอกจาก accuracy รายเดือน — จากผลที่รายงาน ผู้กำกับดูแลควรสรุปหลักอย่างไร
กสรุปว่า ติดตามเฉพาะ distribution ของคะแนนทำนาย โดยไม่เปรียบเทียบกับวิธีง่ายที่กำหนดไว้
ขสรุปว่า ตรวจเฉพาะ feature drift โดยไม่เก็บ operational failures แล้วสรุปจากการทดลองเพียงรอบเดียว
คสรุปว่า นับจำนวนคำขอและ latency โดยไม่แยกคุณภาพข้อมูลหรือผลกระทบ โดยไม่ทดสอบผลเมื่อ distribution เปลี่ยน
งสรุปว่า คุณภาพข้อมูล drift เมตริกแยกกลุ่ม calibration latency และผลกระทบ/เหตุขัดข้อง
เฉลยอธิบาย
AI RMF 1.0 pp. 23, 28, 32-38 อธิบายว่ากรอบ NIST กำหนดให้ตรวจ representativeness, bias, data quality, ผลกระทบแยกกลุ่ม และติดตามความเสี่ยงหลังใช้งานพร้อมกลไกรับ feedback เมื่อนำมาใช้กับโจทย์จึงต้องเลือก “สรุปว่า คุณภาพข้อมูล drift เมตริกแยกกลุ่ม calibration latency และผลกระทบ/เหตุขัดข้อง” ส่วนตัวเลือกอื่นใช้ข้อมูลผิดช่วง เลือกเมตริกไม่ตรงเป้าหมาย หรือข้ามการตรวจผลกระทบที่จำเป็น