การประมาณค่าตัดและความชันของการถดถอยเชิงเส้นอย่างง่ายเป็นอิสระหรือไม่


9

พิจารณาแบบจำลองเชิงเส้น

yi=α+βxi+ϵi

และการประมาณความชันและการสกัดกั้น α^ และ β^ใช้กำลังสองน้อยสุดธรรมดา นี้อ้างอิงสำหรับสถิติคณิตศาสตร์ทำให้คำสั่งว่าα^ และ β^ มีความเป็นอิสระ (ในการพิสูจน์ทฤษฎีบทของพวกเขา)

ฉันไม่แน่ใจว่าฉันเข้าใจว่าทำไม ตั้งแต่

α^=Y¯-β^x¯

นี่ไม่ได้หมายความว่า α^ และ β^มีความสัมพันธ์กันอย่างไร ฉันอาจจะคิดถึงบางสิ่งที่ชัดเจนที่นี่

คำตอบ:


12

ไปที่ไซต์เดียวกันในเพจย่อยต่อไปนี้:

https://onlinecourses.science.psu.edu/stat414/node/278

คุณจะเห็นได้ชัดเจนมากขึ้นว่าพวกเขาระบุรูปแบบการถดถอยเชิงเส้นอย่างง่ายด้วย regressor มีศูนย์กลางอยู่ที่ค่าเฉลี่ยของกลุ่มตัวอย่าง และนี่อธิบายได้ว่าทำไมพวกเขาถึงพูดในภายหลังα^ และ β^ มีความเป็นอิสระ

สำหรับกรณีที่ค่าสัมประสิทธิ์ถูกประมาณด้วย regressor ที่ไม่ได้อยู่กึ่งกลางความแปรปรวนร่วมของพวกเขาคือ

Cov(α^,β^)=-σ2(x¯/Sxx),Sxx=Σ(xผม2-x¯2)

ดังนั้นคุณจะเห็นว่าถ้าเราใช้ regressor เป็นศูนย์กลาง x¯เรียกมันว่า x~นิพจน์ความแปรปรวนร่วมข้างต้นจะใช้ค่าเฉลี่ยตัวอย่างของ regressor กึ่งกลาง x¯~ซึ่งจะเป็นศูนย์และเช่นนั้นก็จะเป็นศูนย์และตัวประมาณค่าสัมประสิทธิ์จะเป็นอิสระ

โพสต์นี้มีข้อมูลเพิ่มเติมเกี่ยวกับพีชคณิตการถดถอยเชิงเส้นอย่างง่าย


ฉันจะพิจารณาใช้ โอโวลต์(α^,β^|X) แทน โอโวลต์(α^,β^). มิฉะนั้นจะรู้สึกอย่างนั้นx¯ และ Sxxจะต้องถูกแทนที่ด้วยประชากรคู่กัน หรือฉันผิด
Richard Hardy
โดยการใช้ไซต์ของเรา หมายความว่าคุณได้อ่านและทำความเข้าใจนโยบายคุกกี้และนโยบายความเป็นส่วนตัวของเราแล้ว
Licensed under cc by-sa 3.0 with attribution required.