กระดาษในการทดสอบสมมติฐานตามผลลัพธ์ของการทดสอบอื่น


11

เป็นที่ทราบกันดีว่าเป็นปัญหาในการเลือกการทดสอบทางสถิติตามผลลัพธ์ของการทดสอบทางสถิติอื่นเนื่องจากค่า p-value นั้นยากที่จะตีความไม่ได้ (เช่นการเลือกการทดสอบทางสถิติตามผลลัพธ์ของอีกแบบหนึ่ง (เช่นภาวะปกติ) ) . อย่างไรก็ตามนี่ยังคงเป็นวิธีปฏิบัติมาตรฐานในหลาย ๆ แอปพลิเคชั่นและมักจะไม่สังเกตเห็นหรือกล่าวถึงในเอกสารที่ใช้ เมื่อมองผ่านวรรณกรรมฉันไม่พบกระดาษที่พูดถึงปรากฏการณ์นี้

ฉันขอขอบคุณการเชื่อมโยงไปยังสิ่งตีพิมพ์ใด ๆ ที่เกี่ยวข้องกับการเลือกการทดสอบทางสถิติตามผลของการทดสอบทางสถิติอื่นโดยเฉพาะอย่างยิ่งสิ่งที่นักวิทยาศาสตร์ประยุกต์สามารถเข้าถึงได้


ความคิดเห็นที่ไม่เกี่ยวข้อง: ในการค้นหาของฉันฉันสะดุดกระดาษโดยการทดสอบนัยสำคัญสมมติฐาน Null RS ของ Nick Nickerson : การทบทวนข้อพิพาทเก่าและต่อเนื่อง 'ซึ่งไม่ได้พูดถึงปรากฏการณ์เฉพาะนี้ แต่ก็ดูเหมือนดีที่จะมอบให้กับนักวิทยาศาสตร์ประยุกต์
Rob Hall

2
นานมาแล้วฉันโพสต์การวิเคราะห์รายละเอียดของสถานการณ์เช่นนี้ที่quantdec.com/envstats/notes/class_12/ucl.htm : มันศึกษาคุณสมบัติของ UCL ที่กำหนดโดยขั้นตอนที่เลือกตามเงื่อนไขในผลลัพธ์ของการทดสอบสมมติฐานเบื้องต้น ( เกี่ยวกับการแจกแจงพื้นฐาน)
whuber

3
คนนี้อาจสนใจคุณ (เห็นด้วย ) จากนั้นก็มีนี้ ที่เกี่ยวข้องกับการทดสอบความเท่าเทียมกันของความแปรปรวนและการทดสอบความปกติตามลำดับก่อนการทดสอบสองตัวอย่าง
Glen_b -Reinstate Monica

สำหรับฉันแล้วดูเหมือนว่าจะพูดง่ายๆว่า "เป็นที่ทราบกันดีว่ามันเป็นปัญหา" คือการให้ความจำเพาะที่ไม่เพียงพอเพราะธรรมชาติของปัญหาอาจขึ้นอยู่กับกรอบทางสถิติที่เราใช้งานอยู่ ปัญหาสำหรับการตีความบ่อยครั้งอาจไม่เป็นปัญหาสำหรับวิธีการประเมินความหมายที่เป็นหลักฐานของข้อมูล
Michael Lew

อาจเป็นตัวอย่างง่ายๆที่ปัญหานี้มีจุดประสงค์เดียวกับการอ้างอิง
BKay

คำตอบ:


1

ผมคิดว่างานวิจัยต่อไปนี้ในขั้นตอนห่วงโซ่มีความเกี่ยวข้องและอาจจะเป็นประโยชน์ในการตอบคำถามของคุณ: http://www.multxpert.com/doc/md2011.pdf


1
ขอบคุณสำหรับกระดาษที่น่าสนใจ ถ้าฉันเข้าใจถูกต้องมันจะดูการจัดสรรอัลฟาจากข้อมูลเป็นชุดของสมมติฐานที่สั่ง ขั้นตอนดังกล่าวสามารถเพิ่มรูปแบบของสมมติฐานทั้งหมดลงในรายการ (เช่นสมมติฐานที่กำหนดว่าสามารถใช้การทดสอบแบบ paremetric และสมมติฐานที่ระบุว่ามีหลักฐานบางอย่างที่ควรใช้แบบทดสอบที่ไม่ใช่แบบ paremetric) แม้ว่านี่จะเป็นแนวทางที่สมเหตุสมผลในกรอบ Neyman – Pearson แต่ฉันไม่แน่ใจว่าวิธีนี้จะแก้ปัญหาการตีความค่า p ในแง่ของฟิชเชอร์
Rob Hall

1
@ RobHall: คุณยินดีมาก! ตรงไปตรงมาฉันเรียกดูกระดาษโดยไม่ต้องเจาะลึกรายละเอียดดังนั้นในเวลานี้ฉันไม่สามารถแสดงความคิดเห็นที่คุ้มค่าได้ แต่ฉันหวังว่าจะทบทวนบทความนี้เมื่อฉันจะมีโอกาส โดยวิธีการที่นี่เป็นอีกหนึ่งกระดาษที่น่าสนใจที่อาจจะเกี่ยวข้องกับการนี้ซึ่งผู้เขียนระบุว่าทั้งสองกรอบสามารถพิจารณาเสริม: stat.duke.edu/courses/Spring07/sta215/Ref/Lehm1993.pdf
Aleksandr Blekh
โดยการใช้ไซต์ของเรา หมายความว่าคุณได้อ่านและทำความเข้าใจนโยบายคุกกี้และนโยบายความเป็นส่วนตัวของเราแล้ว
Licensed under cc by-sa 3.0 with attribution required.