ต้นทุนของ false negative สูงกว่า false positive มาก ควรเลือก threshold อย่างไร — เมื่อทีมต้องแก้ความเสี่ยง ขั้นตอนใดควรทำต่อ
กขั้นตอนถัดไปคือดำเนินการตามแนวทางว่า ใช้ 0.5 เพื่อให้เปรียบเทียบโมเดลได้มาตรฐาน แล้วใช้คะแนนเฉลี่ยแทนการตรวจ error รายกรณี
ขขั้นตอนถัดไปคือดำเนินการตามแนวทางว่า เลือก threshold ที่ทำให้ accuracy บน train สูงที่สุด
คขั้นตอนถัดไปคือดำเนินการตามแนวทางว่า เลือกจาก trade-off precision–recall และต้นทุนจริง โดยเน้น recall ตามข้อกำหนด
งขั้นตอนถัดไปคือดำเนินการตามแนวทางว่า ปรับ threshold ซ้ำจากคำตอบ test จนต้นทุนต่ำสุด และไม่ตรวจว่าสมมติฐานของวิธีตรงกับข้อมูล
เฉลยอธิบาย
Model selection and evaluation อธิบายว่าการเลือกโมเดล เมตริก threshold และวิธี cross-validation ต้องสอดคล้องกับชนิดข้อมูล ต้นทุนความผิดพลาด และการใช้งานจริง เมื่อนำมาใช้กับโจทย์จึงต้องเลือก “ขั้นตอนถัดไปคือดำเนินการตามแนวทางว่า เลือกจาก trade-off precision–recall และต้นทุนจริง โดยเน้น recall ตามข้อกำหนด” ส่วนตัวเลือกอื่นใช้ข้อมูลผิดช่วง เลือกเมตริกไม่ตรงเป้าหมาย หรือข้ามการตรวจผลกระทบที่จำเป็น