ธนาคารกำลังสร้างระบบประเมินความเสี่ยงสินเชื่อ: คะแนนรวมดี แต่ recall ของกลุ่มหนึ่งต่ำกว่ามาก ควรทำอย่างไร
กเพิ่ม threshold เดียวโดยไม่ประเมิน
ขลบชื่อกลุ่มแล้วถือว่ายุติธรรม
ครายงานผลเฉพาะค่าเฉลี่ยความแม่นยำโดยรวมของโมเดลต่อผู้บริหาร โดยไม่แยกวิเคราะห์ผลลัพธ์หรือ recall ตามกลุ่มย่อยแต่อย่างใด
งตรวจคุณภาพ/ตัวแทนข้อมูลและผลกระทบแยกกลุ่ม แล้วกำหนดมาตรการแก้และติดตาม
เฉลยอธิบาย
เมตริกรวมอาจซ่อนความเสียหายรายกลุ่ม การประเมินต้องเชื่อมกับบริบทและผู้ได้รับผล ตัวเลือกอื่นละเลยลำดับเวลา การแยกข้อมูล ความหมายทางสถิติ หรือผลกระทบในการใช้งานจริง แหล่งอ้างอิงทางการ: https://airc.nist.gov/airmf-resources/playbook/measure/