คะแนนรวมดี แต่ recall ของกลุ่มหนึ่งต่ำกว่ามาก ควรทำอย่างไร — เมื่อทีมต้องแก้ความเสี่ยง ขั้นตอนใดควรทำต่อ
กขั้นตอนถัดไปคือดำเนินการตามแนวทางว่า ตรวจคุณภาพ/ตัวแทนข้อมูลและผลกระทบแยกกลุ่ม แล้วกำหนดมาตรการแก้และติดตาม
ขขั้นตอนถัดไปคือดำเนินการตามแนวทางว่า ใช้ threshold กลางเดียวต่อไปเพราะคะแนนรวมผ่านเกณฑ์
คขั้นตอนถัดไปคือดำเนินการตามแนวทางว่า รายงาน weighted average โดยไม่แสดงผลรายกลุ่ม โดยใช้เกณฑ์เดียวตัดสินโดยไม่เทียบ baseline
งขั้นตอนถัดไปคือดำเนินการตามแนวทางว่า เพิ่มตัวอย่างกลุ่มนั้นให้เท่ากลุ่มอื่นแล้วถือว่าปัญหาถูกแก้
เฉลยอธิบาย
AI RMF 1.0 pp. 23, 28, 32-38 อธิบายว่ากรอบ NIST กำหนดให้ตรวจ representativeness, bias, data quality, ผลกระทบแยกกลุ่ม และติดตามความเสี่ยงหลังใช้งานพร้อมกลไกรับ feedback เมื่อนำมาใช้กับโจทย์จึงต้องเลือก “ขั้นตอนถัดไปคือดำเนินการตามแนวทางว่า ตรวจคุณภาพ/ตัวแทนข้อมูลและผลกระทบแยกกลุ่ม แล้วกำหนดมาตรการแก้และติดตาม” ส่วนตัวเลือกอื่นใช้ข้อมูลผิดช่วง เลือกเมตริกไม่ตรงเป้าหมาย หรือข้ามการตรวจผลกระทบที่จำเป็น