ช่วงที่เป็นไปได้ของ


10

สมมติว่าเป็นอนุกรมเวลาสามชุด ,และX1X2Y

เล่นการถดถอยเชิงเส้นสามัญ ~ ( ) เราได้รับU สามัญถดถอยเชิงเส้น ~รับV สมมติว่าYX1Y=bX1+b0+ϵR2=UYX2R2=VU<V

ค่าต่ำสุดและสูงสุดที่เป็นไปได้ของจากการถดถอยคือ ~ ( )R2YX1+X2Y=b1X1+b2X2+b0+ϵ

ฉันเชื่อว่าค่าต่ำสุดควรเป็น + ค่าเล็กเนื่องจากการเพิ่มตัวแปรใหม่จะเพิ่มเสมอ แต่ฉันไม่ทราบวิธีการหาจำนวนค่าเล็ก ๆ นี้และฉันไม่รู้วิธีหาช่วงสูงสุด .R2VR2

คำตอบ:


9

1) แก้ไข: ความคิดเห็นของพระคาร์ดินัลด้านล่างแสดงให้เห็นว่าคำตอบที่ถูกต้องเพื่อนาทีคำถามคือVดังนั้นฉันจะลบ "น่าสนใจ" ของฉัน แต่ในที่สุดก็ไม่ถูกต้องตอบคำถามในส่วนนั้นของโพสต์R2V

2) ค่าสูงสุดคือ 1. พิจารณาตัวอย่างต่อไปนี้ซึ่งเหมาะกับกรณีของคุณR2

x1 <- rnorm(100)
x2 <- rnorm(100)
y <- x1 + 2*x2

> summary(lm(y~x1))$r.squared
[1] 0.2378023                 # This is U
> summary(lm(y~x2))$r.squared
[1] 0.7917808                 # This is V; U < V
> summary(lm(y~x1+x2))$r.squared
[1] 1

ที่นี่เรากำลังแก้ไขความแปรปรวนของที่ 0 หากคุณต้องการถึงแม้ว่าสิ่งต่าง ๆ เปลี่ยนไปเล็กน้อย คุณสามารถทำให้ใกล้เคียงกับ 1 โดยการทำให้เล็กลงและเล็กลง แต่เช่นเดียวกับปัญหาขั้นต่ำคุณไม่สามารถไปถึงที่นั่นได้ดังนั้นจึงไม่มีสูงสุด 1 กลายเป็นsupremumเนื่องจากมันสูงกว่าเสมอแต่ก็ยัง จำกัด เป็น0ϵσϵ2>0R2σϵ2R2σϵ20


2
(+1) ความคิดเห็นบางส่วน: นี่เป็นคำตอบที่ดี มันน่าสนใจที่คุณเอาวิธีการ asymptotic ขณะที่มันไม่ชัดเจนว่า OP มีความสนใจในการที่หรือเป็นไปได้คงหนึ่ง (หรือทั้งสอง) คำตอบนี้ไม่สอดคล้องกับข้อ จำกัด ของ OP ที่แม้ว่าและถ้าหรือสำหรับบางตัวเช่นขั้นต่ำสำหรับ คงที่ทุกขนาดตัวอย่างจะตรง(n) (ยกตัวอย่างพยาธิสภาพของตัวอย่างเหล่านี้) นอกจากนี้ OLS ไม่จำเป็นต้องสอดคล้องกันกับข้อ จำกัด เพิ่มเติมในการทำนาย :)nU<VX1=0X1=a1aRR2V:=V(n)
สำคัญ

@cardinal - เมื่ออ่านซ้ำฉันไม่สามารถหาสาเหตุได้ว่าทำไมฉันถึงใช้วิธีแก้ปัญหาขั้นต่ำเมื่อตอนนี้ดูเหมือนคำตอบที่ถูกต้องชัดเจนและเมื่อคุณสังเกตโดยปริยายฉันก็สามารถสร้างตัวอย่างที่ประสบความสำเร็จได้ เส้นเลือดของส่วนสูงสุด ... อืมเอสเพรสโซ่ของฉันอาจจะเช้านี้ก็ decaf โดยไม่ตั้งใจ (บางทีฉันควรตรวจสอบคำตอบของฉันให้ละเอียดกว่านี้ก่อนโพสต์ด้วย!)V
jbowman

ฉันไม่คิดว่าคุณควรลบสิ่งที่คุณเขียนซึ่งฉันได้พบวิธีการที่น่าสนใจในการตอบคำถาม! ในขณะที่โรคที่ฉันพูดถึงให้อย่างน้อยอย่างน้อยหนึ่งคนอาจสงสัยว่ามีความหมายว่าอย่างไร อีกตัวอย่างหนึ่งอาจไม่เป็นพยาธิวิทยาเนื่องจากในรุ่นทั่วไปของปัญหานี้มันขยายไปถึงกรณีที่เพิ่มเติมใด ๆอยู่ในพื้นที่คอลัมน์ของตัวทำนายอื่น ๆ :)R2X1=0Xi
พระคาร์ดินัล

1
@cardinal - ขอบคุณ! ฉันจะสร้างมันใหม่อย่างเป็นทางการขึ้นมาอีกหน่อยแล้ววางไว้ที่ด้านล่างอีกซักพัก
jbowman

5

ให้เท่ากับความสัมพันธ์ระหว่างและ ,เท่ากับความสัมพันธ์ระหว่างและและความสัมพันธ์ระหว่างและYจากนั้นสำหรับรูปแบบเต็มหารด้วยเท่ากับr1,2X1X2r1,YX1Yr2,YX2YR2V

(1(1r1,22))(12r1,2r1,Yr2,Y+UV).

ดังนั้นสำหรับโมเดลเต็มเท่ากับเฉพาะเมื่อและหรือR2Vr1,2=0r1,Y2=U=0

r1,22=2r1,2r1,Yr2,YUV.

หาก ,สำหรับรุ่นเต็มเท่ากับVr1,2=0R2U+V


(+1) น่ารัก ยินดีต้อนรับสู่เว็บไซต์ โปรดพิจารณาการลงทะเบียนบัญชีของคุณเพื่อให้คุณสามารถเข้าร่วมได้อย่างเต็มที่ ฉันจะต้องดูที่การแสดงออกนี้อย่างใกล้ชิดในภายหลัง :)
สำคัญ

4

โดยไม่มีข้อ จำกัด U และ Vจากนั้นค่าต่ำสุดคือ Vแล้วค่าสูงสุดคือค่าที่น้อยกว่า min(V+U,1). เพราะนี่คือสองตัวแปรที่อาจจะมีความสัมพันธ์ที่ดีเลิศ (ในกรณีที่การเพิ่มตัวแปรที่สองไม่ได้เปลี่ยนที่ทั้งหมด) หรือพวกเขาอาจจะตั้งฉากซึ่งในกรณีนี้รวมถึงผลทั้งในV มันชี้ให้เห็นอย่างถูกต้องในความคิดเห็นที่ว่าสิ่งนี้ยังต้องการให้แต่ละมุมฉากเป็น , เวกเตอร์คอลัมน์ของ 1sR2U+V1

คุณเพิ่มข้อ จำกัด{2} แต่ก็ยังคงเป็นไปได้ว่า0 นั่นคือ , ซึ่งในกรณีนี้0 ในที่สุดก็เป็นไปได้ว่าดังนั้นขอบเขตบนยังคง1)U<VX1X2U=0X1Ymin=max=V+0X1X2min(V+U,1)

หากคุณรู้เพิ่มเติมเกี่ยวกับความสัมพันธ์ระหว่างและฉันคิดว่าคุณสามารถพูดได้มากกว่านี้X1X2


1
(+1) แต่โปรดทราบว่ามันไม่ได้ (ค่อนข้าง) จริงว่าถ้าและเป็นมุมฉากดังนั้นค่าของแต่ละคนจะรวมกันเมื่อรวมทั้งในแบบจำลอง เรายังต้องการให้เป็นมุมฉากกับทุกคนเวกเตอร์1 โปรดทราบว่าคุณสามารถใช้ในเว็บไซต์นี้เพื่อทำเครื่องหมายคณิตศาสตร์ :)X1X2R21LATEX
สำคัญ

นั่นเป็นความจริง. ขอบคุณมากสำหรับความคิดเห็นและชี้ให้เห็นว่าสามารถใช้งานได้ ฉันคิดว่ามันอาจจะ แต่ได้พยายามหนีสไตล์ mathjax (และ [สำหรับอินไลน์ / สมการเขียนเช่นเดียวกับฉันจะในเท็กซ์ทำงานเช่นเสน่ห์ :).LATEX
โจชัว
โดยการใช้ไซต์ของเรา หมายความว่าคุณได้อ่านและทำความเข้าใจนโยบายคุกกี้และนโยบายความเป็นส่วนตัวของเราแล้ว
Licensed under cc by-sa 3.0 with attribution required.