การระบุคำถามที่ไร้ประโยชน์จากแบบสอบถาม

ฉันกำลังพัฒนาแบบสอบถาม เพื่อปรับปรุงความน่าเชื่อถือและความถูกต้องของฉันต้องการใช้วิธีการทางสถิติ

ฉันต้องการกำจัดคำถามที่มีคำตอบเหมือนกันเสมอ ซึ่งหมายความว่าผู้เข้าร่วมเกือบทั้งหมดให้คำตอบเดียวกันกับคำถามเหล่านั้น

ตอนนี้คำถามของฉันคือ:

1. ศัพท์เทคนิคใดสำหรับคำถามที่ไร้ประโยชน์ซึ่งคำตอบนั้นเหมือนกันเสมอจากบริบทการใช้งานเสมอ
2. วิธีการระบุคำถามดังกล่าวมีอะไรบ้าง

ทั้งทฤษฎีการทดสอบแบบคลาสสิก (CTT) และทฤษฎีการตอบสนองข้อ (IRT) สามารถให้คำแนะนำเท่าที่รายการใดที่มีส่วนในลักษณะแฝงที่คุณต้องการวัดและไม่ทำ ด้วย CTT ให้พิจารณา 1) ความยากลำบากของรายการ 2) ความสัมพันธ์ของรายการกับคะแนนรวม 3) ความแปรปรวนของรายการและ 4) ผลกระทบต่อการประเมินความสอดคล้องภายใน (เช่นอัลฟ่าของ Cronbach) หากรายการถูกลบ

รายการที่ง่ายเกินไปหรือยากเกินไปมีแนวโน้มที่จะไม่ช่วยแยกเรื่อง (แยกแยะระหว่างผู้มีคะแนนสูงและผู้มีคะแนนต่ำ) หากคุณไม่สนใจในการวัดความแตกต่างระหว่างผู้ที่มีผลงานดีควรพิจารณาคำถามที่ยากมากเพื่อนำออก ในหลอดเลือดดำที่คล้ายกันสิ่งของง่าย ๆ เหมาะสำหรับคุณที่มีความสนใจในประสิทธิภาพของนักแสดงต่ำ

รายการทั้งหมดควรมีความสัมพันธ์เชิงบวกกับคะแนนรวมและคุณสามารถกำหนดขอบเขตล่างสำหรับความสัมพันธ์นั้นประมาณ 0.20 เป็นแนวทาง สหสัมพันธ์ต่ำหรือสหสัมพันธ์เชิงลบอาจบ่งบอกว่ามีปัญหาการใช้ถ้อยคำในแบบสอบถามของคุณและควรจะมีการย้อนกลับคำถาม

รายการที่มีความแปรปรวนต่ำ (ความแปรปรวนของคะแนน) ควรได้รับการพิจารณาสำหรับการนำออกเนื่องจากไม่แยกหัวข้อและไม่สนับสนุนข้อมูลที่รวบรวมจากแบบสำรวจ รายการที่มีความแปรปรวนสูงมากอาจวัดสิ่งอื่นนอกเหนือจากโครงสร้าง / คุณลักษณะที่คุณต้องการวัด

หากการประมาณความสอดคล้องภายในดีขึ้นเมื่อมีการลบรายการออกรายการนั้นควรได้รับการพิจารณาสำหรับการนำออกหรือเขียนคำซ้ำ

รายการที่ทุกคนได้รับความถูกต้องเป็นบางครั้งรายการสูงสุดและบางครั้งคนที่ไม่ถูกต้องจะเรียกว่ารายการขั้นต่ำ พวกเขาไม่ได้ให้ข้อมูลที่คุณพยายามรวบรวม

หากคุณกำลังพัฒนาแบบสอบถามสูงหรือวางแผนการตลาดแบบสอบถามคุณควรพิจารณา IRT อย่างแน่นอน อย่างไรก็ตามมันเป็นสาขาวิชาขนาดใหญ่และหากคุณไม่สนใจที่จะเข้ามาที่นี่

หวังว่านี่จะช่วยได้

ฉันเชื่อว่าสิ่งที่คุณกำลังมองหาคือทฤษฎีการตอบสนองของรายการ คำถาม "ไร้ประโยชน์" ที่คุณอ้างถึงคือรายการที่มีการเลือกปฏิบัติที่ไม่ดี การใช้การวิเคราะห์ IRT คุณสามารถคำนวณการเลือกปฏิบัติความยากลำบากและความน่าจะเป็นที่เกี่ยวข้องของการเดารายการโดยผู้เข้าร่วมการสำรวจ โปรแกรม R มีแพ็คเกจง่าย ๆ สำหรับการใช้ IRT และฉันจินตนาการว่าชุดซอฟต์แวร์สถิติอื่น ๆ ก็ทำได้เช่นกัน

หากคุณต้องการภาพรวมอย่างรวดเร็วนี่คือหน้าวิกิพีเดีย แต่ฉันอยากจะแนะนำให้ทำการค้นคว้าเพิ่มเติม http://en.wikipedia.org/wiki/Item_response_theory