ความเสถียรของโมเดลในการตรวจสอบความถูกต้องของโมเดลการถดถอย


10

เมื่อพิจารณาถึงการข้ามการตรวจสอบหลายครั้งของการถดถอยโลจิสติกส์และการประมาณค่าหลาย ๆ ค่าของสัมประสิทธิ์การถดถอยแต่ละวิธีควรวัดว่าตัวทำนาย (หรือชุดของผู้ทำนาย) มีเสถียรภาพและมีความหมายหรือไม่ขึ้นอยู่กับสัมประสิทธิ์การถดถอย ? สิ่งนี้แตกต่างสำหรับการถดถอยเชิงเส้นหรือไม่?


@BGreene ฉลาดมาก ทำไมไม่โพสต์ที่เป็นคำตอบ? คุณทำให้ฉันสงสัยด้วยว่าวรรณคดีการเรียนรู้ทั้งมวลมีบางสิ่งที่เกี่ยวข้องหรือไม่
Jack Tanner

เมื่อคุณพูดว่า "หลายข้ามการตรวจสอบ" คุณหมายความว่าคุณใช้ครั้งเท่าการตรวจสอบข้าม? mk
boscovich

@ andrea ฉันพูดว่า "การตรวจสอบข้ามหลายรอบ" เช่น folds k
Jack Tanner

คำตอบ:


2

คุณสามารถใช้สัมประสิทธิ์การถดถอยที่เกิดจากการทดสอบแต่ละครั้งใน CV เป็นการสังเกตอย่างอิสระและคำนวณความน่าเชื่อถือ / ความเสถียรโดยใช้สัมประสิทธิ์สหสัมพันธ์ภายใน (ICC) ตามที่รายงานโดย Shrout & Fleiss


0

ฉันถือว่าคุณเป็นคนตรวจสอบข้ามคุณแบ่งข้อมูลออกเป็นสองส่วนคือชุดฝึกอบรมและชุดทดสอบ คุณพับตัวแบบจากชุดฝึกซ้อมและใช้มันเพื่อทำนายการตอบสนองของชุดทดสอบใช่ไหม? สิ่งนี้จะให้อัตราความผิดพลาดสำหรับทั้งโมเดลไม่ใช่สำหรับตัวทำนายคำเดียว

ฉันไม่รู้ว่าเป็นไปได้หรือไม่ที่จะหาค่า p สำหรับตัวทำนายโดยใช้บางอย่างเช่นการทดสอบ F ที่ใช้ในการถดถอยเชิงเส้นปกติ

คุณสามารถลองลบตัวทำนายออกจากแบบจำลองโดยใช้ตัวอย่างการเลือกถอยหลังหรือไปข้างหน้าหากเป็นเป้าหมายของคุณ

คุณสามารถ CV แทนการใช้ bootstrap เพื่อค้นหาช่วงความมั่นใจสำหรับตัวทำนายแต่ละตัวแล้วดูว่ามันเสถียรหรือไม่

คุณใช้เท่าใน CV ของคุณเท่าไหร่มันเป็นการตรวจสอบไขว้แบบครั้งเดียวหรือไม่?

รายละเอียดเพิ่มเติมเกี่ยวกับเป้าหมายของคุณอาจช่วยตอบคำถามนี้ได้


สมมติว่านี่เป็นแบบลาก่อน ตัวทำนายแต่ละตัวในแต่ละครั้งนั้นมีช่วงความมั่นใจเช่นจาก Bayesian posterior CI หรือ std err จากglm(..., family="binomial")ใน R ฉันจะทำอย่างไรกับช่วงเวลาสำหรับตัวทำนายแต่ละตัวในการวิ่งแบบลาหยุด
Jack Tanner
โดยการใช้ไซต์ของเรา หมายความว่าคุณได้อ่านและทำความเข้าใจนโยบายคุกกี้และนโยบายความเป็นส่วนตัวของเราแล้ว
Licensed under cc by-sa 3.0 with attribution required.