แนวโน้มรวมเป็นบวก แต่เมื่อแยกตามภูมิภาคกลับเป็นลบทุกกลุ่ม ควรทำอย่างไร — จุดบกพร่องใดของกระบวนการควรถูกระบุก่อน
กระบุว่าปัญหาคือ รายงานเฉพาะแนวโน้มรวมเพราะใช้ตัวอย่างมากกว่า โดยไม่รายงานช่วงความไม่แน่นอนของผล
ขระบุว่ากระบวนการยังไม่ยึดหลักว่า ตรวจองค์ประกอบกลุ่มและรายงานทั้งผลรวมกับผลแยกก่อนตีความ
คระบุว่าปัญหาคือ เฉลี่ยค่าประมาณรายภูมิภาคแบบไม่ถ่วงน้ำหนักแล้วใช้แทนผลรวม
งระบุว่าปัญหาคือ ตัดตัวแปรภูมิภาคออกก่อนวิเคราะห์เพื่อให้ทิศทางสอดคล้องกัน
เฉลยอธิบาย
AI RMF 1.0 pp. 23, 28, 32-38 อธิบายว่ากรอบ NIST กำหนดให้ตรวจ representativeness, bias, data quality, ผลกระทบแยกกลุ่ม และติดตามความเสี่ยงหลังใช้งานพร้อมกลไกรับ feedback เมื่อนำมาใช้กับโจทย์จึงต้องเลือก “ระบุว่ากระบวนการยังไม่ยึดหลักว่า ตรวจองค์ประกอบกลุ่มและรายงานทั้งผลรวมกับผลแยกก่อนตีความ” ส่วนตัวเลือกอื่นใช้ข้อมูลผิดช่วง เลือกเมตริกไม่ตรงเป้าหมาย หรือข้ามการตรวจผลกระทบที่จำเป็น