เราสามารถละทิ้งข้อมูลจากการวิจัยเพราะมันไม่สำคัญหรือไม่?

ผมเคยเจอประโยคนี้ในขณะที่อ่านบทความเกี่ยวกับ sciencemag.org

ในท้ายที่สุดการตอบสนองจากนักวิจัยเพียง 7600 คนใน 12 ประเทศถูกรวมเข้าด้วยกันเพราะข้อมูลที่เหลือไม่ถือว่ามีนัยสำคัญทางสถิติ

นี่เป็นวิธีที่เหมาะสมในการทำวิจัยหรือไม่? ที่จะออกผลเพราะพวกเขาไม่ถือว่ามีนัยสำคัญทางสถิติ?

ในรายงานที่อ้างถึงในความคิดเห็นของ whuber มันพูดในหน้า 104 [pg 114 ใน pdf]:

การสำรวจประสบความสำเร็จในการเปิดใช้งานการมีส่วนร่วมของผู้สมัครระดับปริญญาเอกประมาณ 8,900 คนจากกว่า 30 ประเทศ ...

จากนั้นจึงขยายไปยังหน้า 104-105 ว่า:

ในขณะที่ดำเนินการขั้นตอนการทำความสะอาดข้อมูลทีมผู้เชี่ยวชาญของ Eurodoc ได้ทำการตัดสินใจทดสอบการใช้พลังงาน ขึ้นอยู่กับสมมติฐานของแบบสอบถามที่เสร็จสมบูรณ์ซึ่งจะส่งผลให้มีการแจกแจงแบบปกติจำนวนมากได้ทำการทดสอบกำลังงานเพื่อประเมินช่วงความมั่นใจ สิ่งนี้ทำเพื่อทดสอบความถูกต้องของข้อมูล มีการตัดสินใจที่จะยอมรับข้อผิดพลาดระดับสูงสุด 6% ที่ช่วงความมั่นใจ 95% การสูญเสีย 16% ของขนาดตัวอย่างส่งผลให้กลุ่มตัวอย่างจาก 12 ประเทศที่เข้าร่วมมีผู้เข้าร่วม 7,600 คน

ดังนั้นจึงไม่ชัดเจนว่าทำไมการสูญเสีย 16% ในตัวอย่าง แต่สมมติฐานของการตอบสนองที่ไม่สมบูรณ์น่าจะถูกต้อง (และคุณสามารถดูได้ว่าทำไมนักข่าวถึงสับสน)

ประโยคนั้นไม่สมเหตุสมผลจริงๆและผิดพลาดอย่างชัดเจน

ข้อมูลไม่สามารถมีนัยสำคัญทางสถิติหรือไม่มีนัยสำคัญ เฉพาะความสัมพันธ์ระหว่างข้อมูลผลิตภัณฑ์ของการทดสอบทางสถิติเท่านั้นที่สามารถพูดได้ในเงื่อนไขเหล่านี้

หากคำถามคือ: เราสามารถวางข้อมูลจากการวิเคราะห์ของเราเพราะการรวมข้อมูลนั้นหมายความว่าเราไม่สามารถปฏิเสธสมมติฐานว่างได้หรือไม่ คำตอบคือ - แน่นอนฉันหวังว่า! - ไม่มี ข้อความที่คุณอ้างถึงคือรายงานข่าวไม่ใช่บทความทางวิทยาศาสตร์ หากเป็นบทความที่ผ่านการตรวจสอบแล้วจะไม่มีทางได้รับ

อาจไม่รวมข้อมูลเนื่องจากมีเหตุผลที่สำคัญที่ไม่รวมข้อมูลเหล่านั้น อาจเป็นตามที่คนอื่น ๆ ได้แนะนำข้อมูลที่ถูกแยกนั้นไม่สมบูรณ์หรือรวบรวมโดยใช้วิธีการที่แตกต่างกันหรือหาที่เปรียบมิได้

เลขที่

ฉันสงสัยว่านักข่าวตั้งใจจะบอกว่าคนอื่นถูกทิ้งเพราะการสำรวจไม่สมบูรณ์หรือไม่สอดคล้องกันภายใน

ไม่ แต่นักข่าวสามารถใช้ศัพท์แสงเชิงเทคนิคได้อย่างไร้สาระ