การทดลองฟีเจอร์อาจทำให้ผู้ใช้กลุ่มควบคุมพลาดข้อความเตือนความปลอดภัย ทีมควรทำอย่างไร
กไม่ใช้ผลลัพธ์ด้านความปลอดภัยเป็นตัวแปรที่ตัดออก และออกแบบการทดลองไม่เพิ่มอันตราย
ขทดลองต่อเพราะต้องการนัยสำคัญทางสถิติ และใช้เป็นเกณฑ์เดียวสำหรับการดำเนินงานของหน่วยงานทั้งหมด
คไม่แจ้งทีมความปลอดภัย โดยไม่ต้องพิจารณานโยบาย บทบาท หรือความเสี่ยงด้านข้อมูลเพิ่มเติม
งเลือกเฉพาะผู้ใช้ใหม่ที่ไม่รู้ระบบ โดยถือว่าเป็นแนวทางหลักที่หน่วยงานควรใช้ในทุกกรณี
เฉลยอธิบาย
การทดลองต้องไม่สร้างความเสี่ยงที่หลีกเลี่ยงได้ต่อผู้เข้าร่วม สอดคล้อง ACM Code of Ethics เรื่องประโยชน์สาธารณะ การหลีกเลี่ยงอันตราย ความซื่อสัตย์ ความเป็นส่วนตัว ความปลอดภัย และคุณภาพวิชาชีพ แหล่งทางการ:;