ผู้บริหารต้องการคาดการณ์ แต่สภาพแวดล้อมเปลี่ยนจากช่วงที่สร้างแบบจำลอง จึงพิจารณาว่า ในการสร้างแบบจำลองทำนายโรค ที่ใช้ข้อมูลของผู้ป่วยมากกว่า 10,000 คน พอพบแบบจำลองที่สามารถทำนายถูกต้อง 99% ควรสรุปว่าแบบจำลองนี้เป็นแบบจำลองที่ดีหรือไม่ เพราะเหตุใด
กใช่ แบบจำลองมีความแม่นยำสูงมาก
ขต้องเพิ่มจำนวนข้อมูลให้มากขึ้นจึงจะสามารถสรุปได้
คไม่จำเป็นดี เพราะอาจเกิดการ Overfitting แบบจำลองอาจจำข้อมูลฝึกสอนไปแล้ว และอาจไม่สามารถทำนายข้อมูลใหม่ได้อย่างถูกต้อง ต้องทดสอบกับข้อมูลที่แยกออกมา (Validation Set)
งไม่ดี เพราะแบบจำลองมีความแม่นยำสูงเกินไป
เฉลยอธิบาย
ความแม่นยำ 99% อาจบ่งบอกว่าแบบจำลองเกิด Overfitting (จำข้อมูลฝึกสอนเอาไว้) ตัวแปรจะไม่สามารถสรุปไปยังข้อมูลใหม่ได้ดี ต้องทดสอบกับข้อมูลที่แยกออกมา (Test Set หรือ Validation Set) และดูเมตริกการประเมินแบบจำลองอื่น ๆ ตัวเลือก B สรุปจากตัวเลขเพียงอย่างเดียว ตัวเลือก C ความแม่นยำสูงไม่ได้หมายว่าไม่ดี ตัวเลือก D ไม่จำเป็น