ทำไมข้อมูลช่วงสั้นจึงทำให้เข้าใจผลของเกมผิดได้
ข้อมูลช่วงสั้นอาจดูเหมือนมีรูปแบบชัดเจน ทั้งที่ยังมีตัวอย่างไม่มากพอให้สรุปแนวโน้ม ความผันผวนในข้อมูลขนาดเล็กทำให้เหตุการณ์บางอย่างดูเด่นกว่าความเป็นจริง และอาจทำให้ผู้สังเกตเชื่อว่าพบกฎที่ใช้ได้ทั่วไปทั้งที่ยังไม่มีหลักฐานรองรับ
ตัวอย่างน้อยทำให้ผลบางอย่างดูเด่นเกินจริง
เมื่อมีข้อมูลเพียงช่วงสั้น เหตุการณ์ที่เกิดซ้ำหรือผลที่แตกต่างออกไปเพียงไม่กี่ครั้งอาจครอบงำภาพรวมได้ หากเก็บข้อมูลต่อไป รูปแบบที่เห็นในตอนแรกอาจเปลี่ยนไปอย่างมาก จึงควรระบุขนาดและช่วงเวลาของข้อมูลทุกครั้งที่สรุป
การเห็นรูปแบบในตัวอย่างเล็กไม่ใช่เรื่องผิด แต่การนำรูปแบบนั้นไปอ้างเป็นกฎทั่วไปคือจุดที่ควรระวัง ข้อสรุปควรมีขอบเขตสอดคล้องกับข้อมูลที่ใช้ ไม่ขยายไปไกลกว่าสิ่งที่สังเกตได้จริง
เลือกข้อมูลอย่างไรให้เปรียบเทียบได้
ควรกำหนดเกณฑ์เก็บข้อมูลก่อนเริ่ม เช่น นับเหตุการณ์ประเภทใด เก็บในช่วงไหน และจะจัดการข้อมูลที่ขาดหายอย่างไร หากเปลี่ยนวิธีนับระหว่างทาง ผลที่ได้อาจเปรียบเทียบกันไม่ได้
อย่าเลือกเฉพาะเหตุการณ์ที่น่าจดจำหรือสนับสนุนความคิดเดิม ควรบันทึกเหตุการณ์ตามเกณฑ์เดียวกันทั้งหมดและระบุข้อจำกัด การเก็บอย่างเป็นระบบช่วยให้ตรวจสอบย้อนกลับได้ แม้ยังไม่สามารถสรุปผลในอนาคตได้
แยกการสังเกตออกจากข้อสรุป
ประโยคว่าในข้อมูลชุดนี้พบรูปแบบหนึ่ง แตกต่างจากการกล่าวว่ารูปแบบนั้นจะเกิดขึ้นเสมอ ประโยคแรกอธิบายสิ่งที่เห็น ส่วนประโยคหลังต้องการหลักฐานมากกว่าและอาจต้องใช้ความรู้เกี่ยวกับระบบประกอบ
การเขียนข้อสรุปที่ดีระบุทั้งสิ่งที่พบและสิ่งที่ยังไม่ทราบ หากมีคำอธิบายทางเลือกหลายแบบ ควรบันทึกไว้แทนการเลือกเหตุผลที่ชอบที่สุดเพียงข้อเดียว
สรุป
ข้อมูลช่วงสั้นมีประโยชน์สำหรับการสังเกต แต่ความผันผวนและตัวอย่างที่น้อยอาจทำให้รูปแบบดูแน่นอนเกินจริง ควรเก็บข้อมูลด้วยเกณฑ์สม่ำเสมอและจำกัดข้อสรุปให้อยู่ในขอบเขตหลักฐาน