หน่วยงานรัฐกำลังวิเคราะห์คำร้องบริการประชาชน: หลังใช้งานหกเดือน การกระจายฟีเจอร์เปลี่ยนชัด แต่ยังไม่มี label ใหม่ ควรทำอย่างไร
กตรวจ drift และคุณภาพข้อมูล พร้อมกำหนดเงื่อนไขติดตาม/หยุดใช้ แต่ยังไม่สรุป performance จาก drift อย่างเดียว
ขฝึกด้วยข้อมูล production ที่ไม่มี label ทันที
คไม่ต้องดำเนินการใด ๆ เพิ่มเติม เพราะระบบเคยผ่านการทดสอบตอนติดตั้งแล้ว จึงเชื่อว่ายังทำงานได้ดีตลอดไปโดยไม่ต้องตรวจสอบ drift หรือคุณภาพข้อมูลซ้ำอีก
งสรุปว่า accuracy ลดลงเท่ากันแน่นอน
เฉลยอธิบาย
data drift เป็นสัญญาณเตือน ไม่เท่ากับ concept drift หรือผลลัพธ์แย่ลงเสมอ ต้องติดตาม label และผลกระทบจริง ตัวเลือกอื่นละเลยลำดับเวลา การแยกข้อมูล ความหมายทางสถิติ หรือผลกระทบในการใช้งานจริง แหล่งอ้างอิงทางการ: https://airc.nist.gov/airmf-resources/playbook/measure/