โดยทั่วไปคุณสามารถดำเนินการปรับปรุงประมาณการพารามิเตอร์ใด ๆ ที่คุณอาจทำการทดสอบพร้อมกับข้อมูลเพิ่มเติม การหยุดการรวบรวมข้อมูลเมื่อการทดสอบประสบความสำเร็จในระดับความสำคัญแบบกึ่งกฎเกณฑ์เป็นวิธีที่ดีในการอนุมานที่ไม่ดี นักวิเคราะห์อาจเข้าใจผิดว่าผลลัพธ์ที่สำคัญเป็นสัญญาณว่างานเสร็จเป็นหนึ่งในผลที่ไม่ได้ตั้งใจของกรอบการทำงานของเนย์แมน - เพียร์สันตามที่ผู้คนตีความค่าpซึ่งเป็นสาเหตุของการปฏิเสธหรือล้มเหลวในการปฏิเสธโมฆะ ด้านใดของขีด จำกัด วิกฤติที่พวกเขาทำ
โดยไม่คำนึงถึงทางเลือกแบบเบย์กับกระบวนทัศน์ประจำ (หวังว่าจะมีคนอื่น) ช่วงความเชื่อมั่นยังคงเป็นข้อมูลที่ดีกว่าจุดที่สมมติฐานว่างเปล่าพื้นฐานสามารถปฏิเสธได้ สมมติว่าการรวบรวมข้อมูลมากขึ้นจะทำให้การทดสอบความสำคัญขั้นพื้นฐานของคุณบรรลุความสำคัญยิ่งขึ้น (และไม่เปิดเผยว่าการค้นพบความสำคัญก่อนหน้านี้ของคุณเป็นผลบวกที่ผิดพลาด) คุณอาจพบว่าไม่มีประโยชน์เพราะคุณปฏิเสธวิธีใด อย่างไรก็ตามในสถานการณ์นี้ช่วงความมั่นใจของคุณรอบพารามิเตอร์ที่เป็นปัญหาจะยังคงลดลงปรับปรุงระดับความมั่นใจซึ่งคุณสามารถอธิบายประชากรที่คุณสนใจได้อย่างแม่นยำ
μ = 0
One Sample t-test
data: rnorm(99)
t = -2.057, df = 98, p-value = 0.04234
alternative hypothesis: true mean is not equal to 0
95 percent confidence interval:
-0.377762241 -0.006780574
sample estimates:
mean of x
-0.1922714
t.test(rnorm(99))
α = .05rnorm
เรียกใช้สิ่งนี้อีกครั้งในฐานะ set.seed(8);t.test(rnorm(99,1))
μ = [ .69 , 1.12 ]
μ = .8mu=.8
set.seed(8);t.test(rnorm(999,1),mu=.8)
μ = 0μ = .8μ = [ .90 , 1.02 ]μ = .89
ฉันไม่สามารถแก้ไขสมมติฐานว่างได้หลังจากข้อเท็จจริง แต่หากไม่มีการรวบรวมข้อมูลใหม่เพื่อทดสอบสมมติฐานที่แข็งแกร่งยิ่งขึ้นหลังจากผลลัพธ์นี้ฉันสามารถพูดด้วยความมั่นใจ 95% ว่าการจำลอง "การศึกษา" ของฉันจะทำให้ฉันปฏิเสธ H0: μ = .9set.seed(9);t.test(rnorm(999,1),mu=.9)
การทดสอบสมมติฐานว่างที่เข้มงวดมากขึ้นหรือดีขึ้นเพียงมุ่งเน้นไปที่การลดช่วงความเชื่อมั่นของคุณเป็นเพียงวิธีเดียวที่จะดำเนินการต่อไป แน่นอนว่าการศึกษาส่วนใหญ่ที่ปฏิเสธสมมติฐานว่างจะวางรากฐานสำหรับการศึกษาอื่น ๆ ที่สร้างขึ้นบนสมมติฐานที่เป็นทางเลือก เช่นถ้าฉันกำลังทดสอบสมมุติฐานทางเลือกว่าสหสัมพันธ์มีค่ามากกว่าศูนย์ฉันสามารถทดสอบผู้ไกล่เกลี่ยหรือผู้ดำเนินรายการในการติดตามผลการศึกษาต่อไป ... และในขณะที่ฉันอยู่ที่นี่ฉันก็อยากจะทำให้แน่ใจ ฉันสามารถทำซ้ำผลลัพธ์ดั้งเดิมได้
อีกวิธีที่ควรพิจารณาคือความเท่าเทียมกันการทดสอบความกัน หากคุณต้องการสรุปว่าพารามิเตอร์อยู่ในช่วงของค่าที่เป็นไปได้ไม่เพียง แต่แตกต่างจากค่าเดียวคุณสามารถระบุช่วงของค่าที่คุณต้องการให้พารามิเตอร์อยู่ภายในตามสมมติฐานทางเลือกเดิมและทดสอบ เทียบกับชุดของสมมติฐานว่างอื่นที่แสดงถึงความเป็นไปได้ที่พารามิเตอร์นั้นอยู่นอกช่วงนั้น ความเป็นไปได้ครั้งสุดท้ายนี้อาจคล้ายกับสิ่งที่คุณมีในใจเมื่อคุณเขียน:
เรามี "หลักฐานบางอย่าง" เพื่อเป็นทางเลือกที่เป็นจริง แต่เราไม่สามารถสรุปได้ ถ้าฉันต้องการสรุปข้อสรุปอย่างแท้จริง ...
set.seed(8)
rnorm(99)
rnorm(99,1)-1
μ = .8- 0.2 ≤ μ ≤ 0.2
require(equivalence);set.seed(8);tost(rnorm(99),epsilon=.2)
tost
μ = [ - .27 , .09 ]rnorm(999)
μ = [ - .09 , .01 ]
ฉันยังคิดว่าช่วงความมั่นใจนั้นน่าสนใจกว่าผลการทดสอบความเท่ากัน มันแสดงถึงสิ่งที่ข้อมูลแนะนำค่าเฉลี่ยประชากรนั้นมีความเฉพาะเจาะจงมากกว่าสมมติฐานทางเลือกและแนะนำว่าฉันมั่นใจได้อย่างมีเหตุผลว่ามันอยู่ในช่วงเวลาที่น้อยกว่าที่ฉันได้ระบุไว้ในสมมติฐานทางเลือก ในการสาธิตฉันจะใช้อำนาจในการจำลองที่ไม่สมจริงของฉันอีกครั้งและ "ทำซ้ำ" โดยใช้set.seed(7);tost(rnorm(999),epsilon=.09345092)
: นั่นเอง, p = .002