วิธีการจัดการการตอบแบบสำรวจที่ไร้เหตุผล

ฉันส่งแบบสำรวจไปยังกลุ่มตัวอย่างของศิลปิน หนึ่งในคำถามคือเพื่อระบุเปอร์เซ็นต์ของรายได้ที่ได้รับจาก: กิจกรรมศิลปะการสนับสนุนจากรัฐบาลบำนาญส่วนตัวกิจกรรมที่ไม่เกี่ยวข้องกับศิลปะ ประชาชนประมาณ 65% ตอบว่าผลรวมของเปอร์เซ็นต์คือ 100 คนอื่นไม่: ตัวอย่างเช่นมีใครตอบว่า 70% ของรายได้ของพวกเขามาจากกิจกรรมทางศิลปะของเขาและ 60% โดยรัฐบาลรายได้ และอื่น ๆ คำถามของฉันคือฉันควรปฏิบัติตามข้อสังเกตเหล่านี้อย่างไร ฉันควรลบแก้ไขหรือเก็บรักษาไว้หรือไม่ ขอขอบคุณ!

นี่เป็นสถานการณ์ที่ดีสำหรับการวิเคราะห์ความไว วิเคราะห์ข้อมูลของคุณในสามวิธี -

1. ที่พวกเขาเป็น
2. หลังจากยกเว้น "the illogicals" นั่นคือคนที่มีเปอร์เซ็นต์ไม่รวมถึง 100 (หรือ 100 +/- 10)
3. หลังจากปรับตำแหน่งที่จำเป็นเพื่อให้เปอร์เซ็นต์ของแต่ละคนเพิ่มขึ้นถึง 100

จากนั้นเปรียบเทียบผลลัพธ์การแบ่งปันเหตุผลใด ๆ ที่คุณสามารถพัฒนาได้ว่าผลลัพธ์ใดที่อาจแม่นยำกว่าหรือแม่นยำกว่าในบางประเด็น

นอกจากนี้คุณยังสามารถตรวจสอบช่วงของวิธีที่ตรรกะและลอจิกแตกต่างกันถ้ามี คนไร้เหตุผลมีแนวโน้มที่จะรายงานรายได้ที่สูงขึ้นหรือไม่? เพื่อแสดงการสนับสนุนที่มากขึ้นสำหรับแนวคิดหรือโปรแกรมบางอย่าง หากต้องการข้ามคำถามเพิ่มเติม เพื่อที่จะทำให้มีอคติมากขึ้นในแง่ของการทำให้เป็นเส้นตรงหรือไม่เลือกสัดส่วนการตอบสนองกลางหรือการตอบสนองที่มากเกินควร?

ด้วยประมาณ 400 หรือไร้เหตุผลเหล่านี้คุณมีข้อมูลเพียงพอที่จะประเมินความสัมพันธ์ระหว่างระดับความไร้เหตุผลและระดับความลำเอียงที่กำหนด บางสิ่งบางอย่างเช่นความสัมพันธ์ที่ตอบสนองต่อปริมาณรังสี

สิ่งที่คุณเรียนรู้จากการตรวจสอบเหล่านี้อาจถูกป้อนกลับเข้าไปในแผนของคุณสำหรับจัดการกับไร้เหตุผลเมื่อมันมาถึงการวิเคราะห์หลักที่น่าสนใจ

ดังที่ได้กล่าวมาแล้วที่นี่คำตอบเหล่านั้นไม่จำเป็นต้องไร้เหตุผล ตัวอย่างเช่นคุณพูด

คนอื่นไม่: ยกตัวอย่างเช่นมีใครตอบว่า 70% ของรายได้ของพวกเขามาจากกิจกรรมทางศิลปะของเขาและ 60% โดยรัฐบาลรายได้และอื่น ๆ

นั่นเป็นเหตุผลที่สมบูรณ์แบบหากรายได้ 30% มาจากกิจกรรมศิลปะที่ทำเพื่อรัฐบาล จากนั้นเรามีสามกลุ่มจริง ๆ :

• กิจกรรมศิลปะที่ไม่เกี่ยวข้องกับรัฐบาล: 40%
• รัฐบาลไม่เกี่ยวข้องกับกิจกรรมศิลปะ: 30%
• กิจกรรมศิลปะที่ได้รับการอุดหนุนจากรัฐบาล: 30%

ตัวเลขเหล่านั้นรวมกันได้มากถึง 100%

พิจารณาคำถามต่อไปนี้:

• รัฐบาลแสตมป์อาหารหรือกิจกรรมที่ไม่เกี่ยวข้องกับศิลปะหรือไม่?
• รัฐบาลประกันสังคมหรือบำนาญหรือไม่?
• เงินบำนาญของรัฐบาล (อดีตพนักงานของรัฐ) เป็นเงินบำนาญส่วนตัวหรือรัฐบาล?
• รัฐบาลอนุญาตให้ทาสีกิจกรรมทางศิลปะหรือรัฐบาลหรือไม่?
• งานสอนศิลปะที่โรงเรียนในท้องถิ่นรัฐบาลหรือกิจกรรมศิลปะหรือกิจกรรมที่ไม่เกี่ยวข้องกับศิลปะหรือไม่?
• หากเกษียณจากงานด้านศิลปะ (การสอนหรือการค้าเช่นการวาดบัตรของขวัญ) กิจกรรมส่วนตัวหรืองานศิลปะนั้นเป็นเงินบำนาญหรือไม่? หรือในกรณีของการสอนอาจเป็นไปได้ที่รัฐบาล?

ดูเหมือนว่าคุณต้องการให้หมวดหมู่เหล่านี้เป็นเอกสิทธิ์เฉพาะบุคคล อย่างไรก็ตามฉันไม่คิดว่าทุกคนจะตีความพวกเขาในแบบนั้น คุณอาจมีความคิดที่ชัดเจนเกี่ยวกับวิธีจัดหมวดหมู่กิจกรรมเหล่านั้น แต่ไม่ชัดเจนว่าผู้ตอบแบบสอบถามของคุณมีหน่วยงานเดียวกันในใจเมื่อตอบ อย่างน้อยถ้าคุณต้องการให้ตัวเลขเพิ่มเป็น 100% คุณควรบอกคนอื่น

โดยส่วนตัวแล้วฉันคิดว่าวิธีที่ดีที่สุดสำหรับปัญหาแบบนี้คือการทำกลุ่มโฟกัส ในการสำรวจแบบดั้งเดิมคุณอาจไม่สามารถตรวจสอบคำตอบได้ ดังนั้นโทรหรือเยี่ยมชมคนที่จะถูกกำหนดเป้าหมายจากการสำรวจและเริ่มการสนทนา จากนั้นเมื่อพวกเขาให้คำตอบที่คุณไม่เข้าใจให้ถามพวกเขาว่าทำไม และนอกเหนือจากนั้นให้ถามพวกเขาว่าคุณควรถามคำถามอย่างไรเพื่อให้ได้ผลลัพธ์ที่คุณต้องการ วิธีนี้ทำงานได้เหมือนกลุ่มโฟกัสซึ่งเป็นแบบโต้ตอบ

เมื่อคุณทำสิ่งนั้นเสร็จแล้วคุณจะได้แนวคิดที่ดีขึ้นเกี่ยวกับวิธีจัดการกับคำตอบที่ไม่เหมาะกับรูปแบบของคุณ ตัวอย่างเช่นคุณอาจใช้เวลา 30% พิเศษและลบออกครึ่งละ จากนั้นคุณจะมีกิจกรรมศิลปะ 55% และรัฐบาล 45% หรือคุณอาจจัดหมวดหมู่เป็นกิจกรรมศิลปะส่วนตัว 40% กิจกรรมทางศิลปะที่รัฐบาลสนับสนุน 30% และอื่น ๆ 30% (ในกรณีนี้การสนับสนุนจากรัฐบาลไม่เกี่ยวข้องกับกิจกรรมศิลปะเช่นแสตมป์อาหารหรือการสนับสนุนค่าเช่า) หรือเลิกทำแบบสำรวจและทำซ้ำเพราะคนไม่เข้าใจหมวดหมู่ของคุณอย่างถูกต้อง ส่วนนี้ขึ้นอยู่กับสิ่งที่คุณเข้าใจหมวดหมู่ให้มีความหมายเช่นเดียวกับที่พวกเขาตีความมัน

สายเกินไปแล้ว แต่สำหรับการสำรวจในอนาคตลองทำกลุ่มโฟกัสปกติก่อนการสำรวจ จากนั้นคุณสามารถทดสอบคำถามของคุณในสภาพแวดล้อมกลุ่มและปรับปรุงคำถามได้ คุณอาจพบว่าคุณได้รับคำถามเพิ่มเติมจากกลุ่ม หากเป็นการยากเกินไปที่จะทำด้วยตนเองให้ลองทำออนไลน์ หรือทำแบบสำรวจการทดสอบ (ของคนจำนวนน้อยลงตรวจสอบคำตอบกับคำถามติดตาม) ทางโทรศัพท์เป็นการส่วนตัวก่อนที่จะทำการสำรวจจริง สิ่งเหล่านี้สามารถช่วยให้คำถามของคุณชัดเจนขึ้น

ตัวอย่างเช่นหมวดหมู่ที่แท้จริงของคุณอาจเป็นรายได้ส่วนตัวจากกิจกรรมศิลปะ กิจกรรมศิลปะที่รัฐบาลสนับสนุน เงินบำนาญส่วนตัวจากงานเดิม รายได้อื่น ๆ ที่ไม่เกี่ยวข้องกับกิจกรรมศิลปะ หรือสิ่งที่แตกต่าง ส่วนหนึ่งของปัญหาคือฉันไม่สามารถบอกได้ว่าคุณต้องการอะไรซึ่งทำให้ฉันคิดว่าผู้ตอบแบบสอบถามของคุณไม่สามารถทำได้เช่นกัน หากมีการตีความที่แตกต่างกันสามแบบเกือบจะเหมือนกับว่าคุณกำลังตอบคำถามจากแบบสำรวจสามแบบ

ฉันไม่สามารถให้คำตอบสำหรับกรณีทั่วไปของการตอบสนองที่ไร้เหตุผล แต่สำหรับคำถามประเภทนี้โดยเฉพาะ - ทำตรงนั้น ไม่เพียง แต่ในการสำรวจเท่านั้น แต่ยังมีการสัมภาษณ์แบบกึ่งโครงสร้างซึ่งฉันมีโอกาสสังเกตว่าผู้คนตอบคำถามแบบนี้ได้อย่างไร จากนี้เช่นเดียวกับบางประสบการณ์ทั่วไปในการสังเกตและวิเคราะห์ processess ความรู้ความเข้าใจผมจะแนะนำ: ปกติข้อมูลของคุณกลับไปรวม 100% เหตุผลก็คือผู้คนดูเหมือนจะไปที่หมวดหมู่ที่สำคัญที่สุด - ในกรณีของคุณ, ซึ่งจะเป็นรายได้ที่ใหญ่ที่สุด - ให้ค่าประมาณความรู้สึกทางเดินอาหารเป็นเปอร์เซ็นต์แล้วเริ่มคิดถึงหมวดหมู่ขนาดเล็กถัดไป ไปยังจุดยึดของหมวดหมู่แรกรวมถึงหมวดหมู่ที่กล่าวถึงแล้ว

ยกตัวอย่างเช่นรถไฟแห่งความคิดจะเป็นเช่น: "แหล่งรายได้แรกของฉันมีมากกว่าครึ่งแน่นอนมันทำอะไร 60%? ไม่ไม่ต่ำเกินไปสมมติว่า 65% อย่างที่สองประมาณหนึ่งในสามของที่นั่น เพื่อที่จะเป็นมากกว่า 20% เอ่อยากที่จะคำนวณในหัวของฉันลองปัดเศษขึ้น 25% คนที่สามก็รู้สึกเหมือนหนึ่งในสามของคนแรก แต่จริงๆแล้วมันมักจะมากกว่า วินาทีดังนั้นมันควรจะเป็น 30% หรือแม้แต่ 35 ไม่ได้เราจะไปด้วย 30 โอ้และฉันลืมไปว่าฉันมีแหล่งที่สี่ที่เกิดขึ้นปีละครั้งเท่านั้นที่ควรจะเล็กเมื่อเทียบกับคนอื่น ๆ ดังนั้น 5 หรือ 10% Probabaly 5 ใกล้กว่าจริง ๆ แล้วมันไม่มาก " คุณก็เลยได้คำตอบ 65 + 25 + 30 + 5 = 125%

เนื่องจากผู้คนมักจะตระหนักถึงขนาดสัมพัทธ์ของส่วนรายได้ซึ่งกันและกันมากกว่าส่วนทั้งหมดฉันจึงบอกว่าการทำให้เป็นมาตรฐานเป็นลำดับที่นี่ถ้าคุณต้องการเรียกใช้การวิเคราะห์เชิงตัวเลขกับรายได้ . ฉันจะทำงานกับตัวเลขที่รายงานจริงเท่านั้นหากความแตกต่างระหว่างความเชื่อของผู้คนและคำแถลงเกี่ยวกับรายได้และความเป็นจริงเชิงวัตถุเป็นหัวข้อสำคัญสำหรับงานของคุณเช่นถ้าคุณเป็นนักจิตวิทยาที่ศึกษาอคติเกี่ยวกับความรู้ความเข้าใจหรือถ้าคุณสนใจ การรับรู้ตนเองของศิลปินมากกว่าในสภาวะเศรษฐกิจ

น่าเศร้าที่ฉันไม่มีแหล่งวรรณกรรมที่ดีที่จะพิสูจน์ว่ามันใช้งานได้จริงตามที่ฉันอธิบายไว้มันเป็นเพียงการสังเกตเชิงประจักษ์ส่วนตัวของฉัน แต่ฉันไม่คิดว่าผู้ตรวจสอบจะได้รับการตัดสินใจเกี่ยวกับการตัดสินใจในลักษณะนี้เนื่องจากตามคำตอบอื่น ๆ กล่าวว่าไม่มีวิธี "สิทธิ" เดียวที่จะปฏิบัติต่อมัน หากมีสิ่งใดพวกเขาจะยกเลิกข้อมูลทั้งหมดของคุณจากคำถามนี้ว่าไม่ถูกต้องเนื่องจากเทคนิคการสืบค้นที่มีข้อบกพร่อง สิ่งที่ดีที่สุดที่คุณสามารถทำได้คือรับทราบไว้ล่วงหน้าและเกิดข้อโต้แย้งว่าทำไมงานของคุณถึงมีประโยชน์และทำไมข้อสรุปที่คุณวาดยังดีแม้ว่าแหล่งข้อมูลนี้จะมีความไม่ถูกต้องเฉพาะ

หากสังคมศาสตร์สอนฉันทุกอย่างเป็นไปได้ว่าถ้าคุณให้โอกาสผู้อื่นในการตอบสนองอย่างไม่เป็นเหตุเป็นผลพวกเขาก็จะ จึงมั่นใจได้ว่าไม่มีสิ่งผิดปกติเกี่ยวกับตัวแบบของคุณ นี่คือสิ่งที่คุณควรคำนึงถึงสำหรับการออกแบบแบบสำรวจในอนาคต ในขณะนี้อาจเป็นการดีที่สุดที่จะปล่อยให้การตอบสนองตามที่เป็นอยู่และจำไว้เสมอในการวิเคราะห์ของคุณว่าคำตอบจะไม่เพิ่มขึ้นจริง 100% อย่างที่คิด แทนที่จะเป็นสัดส่วนที่แท้จริงคุณมีสัญญาณที่ชัดเจนว่ารายได้แต่ละเรื่องได้รับจากแต่ละหมวดหมู่เท่าไรดังนั้นให้วิเคราะห์ด้วยวิธีนั้น

กิจกรรมศิลปะการสนับสนุนจากรัฐบาลบำนาญส่วนตัวกิจกรรมที่ไม่เกี่ยวข้องกับศิลปะ

ดูเหมือนว่า "กิจกรรมศิลปะ" และ "กิจกรรมที่ไม่เกี่ยวข้องกับศิลปะ" ควรรวมกันได้สูงสุด 100%

แน่นอน "กิจกรรมที่ไม่เกี่ยวข้องกับศิลปะ" นั้นไม่เหมือนกับ "ไม่ใช่กิจกรรมที่เกี่ยวข้องกับศิลปะ" เนื่องจากอาจมีรายได้ที่เกี่ยวข้องกับการไม่มีกิจกรรมเลย แต่นั่นเป็นการแยกผมที่ศิลปินส่วนใหญ่จะไม่สังเกตเห็น

หากคุณคิดว่าหมวดหมู่ที่ 1 และ 4 ควรเพิ่มได้สูงสุด 100% และตีความผู้ตอบเหล่านั้นซ้ำอีกครั้งคุณอาจพบว่าส่วนใหญ่มีหมวดหมู่ที่ 2 และ 3 ในหมวด 4

อย่างไรก็ตามทั้งหมดนี้เป็นการจัดการข้อมูลที่ไม่เหมาะ หากคุณต้องการคำตอบทางสถิติที่ถูกต้องคุณต้องรวบรวมข้อมูลที่ถูกต้อง ผู้คนอาจตอบสนองต่อการสำรวจของคุณและมันก็ยากที่จะป้องกัน แต่ถ้าคนที่พยายามตอบคำถามของคุณอย่างตรงไปตรงมาอาจทำให้สับสนในสิ่งที่มีความหมายการสำรวจของคุณจะต้องเขียนใหม่

ครั้งต่อไปจะตรวจทานแบบสำรวจเพื่อความเข้าใจรวมถึงความคลุมเครือก่อนที่จะส่งออกไป

คุณได้รับสี่หมวดหมู่สำหรับรายได้ - แล้วรายได้ที่ไม่มีในพวกเขาคืออะไร? ตัวอย่างเช่นเงินปันผลรับจากการถือหุ้น ไม่ใช่รายได้จากกิจกรรมทุกรูปแบบ แต่ไม่ใช่การสนับสนุนจากรัฐบาลหรือเงินบำนาญ ฉันขอแนะนำว่าในกรณีที่ไม่มีข้อมูลอื่น ๆ คุณควรพิจารณาคำตอบว่าถูกต้องและกำหนดเงินที่ขาดไปให้กับแหล่งข้อมูลที่ผู้ตอบแบบสอบถามไม่ได้พิจารณาให้ครอบคลุมในหมวดหมู่

ที่จริงแล้วค่อนข้างง่าย (และไม่ไร้เหตุผลอย่างที่คุณคิด)! ฉันคิดว่ามันเป็นสัดส่วนของรายได้ประเภทต่าง ๆ ที่คุณเป็นจริงโดยขอเปอร์เซ็นต์ ดังนั้นคุณสามารถปรับมาตรฐานให้เป็น 100% ได้ ในตัวอย่างของคุณ: ถ้ามีคนพูดว่า: 70% ของรายได้ของฉันมาจากกิจกรรมศิลปะและ 60% มาจากการสนับสนุนของรัฐบาลบุคคลนี้ (ผู้ที่ไม่เคยมีการฝึกอบรมการทำงานกับเปอร์เซ็นต์) พูดจริง: ญาติขนาดหรือสัดส่วนของรายได้ของฉันจากกิจกรรมศิลปะและรัฐบาลอยู่ที่ประมาณ 70 ถึง 60 หรือ 7 ถึง 6 (อาจจะไม่รู้ว่าจะเพิ่มขึ้นเป็นร้อยละ .. ) คุณสามารถแปลงข้อความเหล่านี้เกี่ยวกับสัดส่วนกับข้อความเกี่ยวกับร้อยละโดยเพียงแค่เปลี่ยนพวกเขาดังนี้: 70/130 * 100 = รายได้ศิลปะ 53% และ 60/130 * 100 = 47% รายได้จากการสนับสนุนของรัฐบาล ..

(สิ่งที่ฉันทำที่นี่ใช้จริง 130% เป็น "ใหม่" 100% และคำนวณสัดส่วน .. )

PS ใช้ได้กับทุกกรณีที่ผลรวมของเปอร์เซ็นต์ที่ระบุไม่เท่ากับ 100

หวังว่านี่จะช่วยได้!

คำตอบส่วนใหญ่ที่ให้ไปแล้วได้ให้ข้อมูลเชิงลึกเกี่ยวกับข้อบกพร่องด้านระเบียบวิธีการสำรวจที่เห็นได้ชัดอยู่แล้วดังนั้นฉันจะไม่อยู่ที่นี่ ฉันจะให้ตัวเลือกที่ใช้งานได้จริงบางอย่างเกี่ยวกับวิธีจัดการข้อมูลนี้เนื่องจากมีการรวบรวมและแม้จะมีคำถามที่มีข้อบกพร่อง มีสองสามวิธีในการจัดการกับสิ่งนี้ คุณอาจจะพิจารณาการทำเครื่องหมายการตอบสนองที่ไม่เป็นไปตามความหมายของ "การตอบสนองที่ถูกต้อง" โดยการรักษาคำถามทั้งหมดเป็นหายไปแล้วต่อไปนี้จำนวนของการปฏิบัติสำหรับการจัดการรายการ-nonresponse ใด ๆ เช่นผู้ที่กล่าวถึงที่นี่

$y_{{old}_{ij}}$ $(j=1,2,3,4)$$y_{{new}_{ij}}$

$$\begin{eqnarray*} y_{new_{ij}} & = & \begin{cases} 0 & ,\,\text{for}\,\sum_{j=1}^{4}y_{old_{ij}}=0\\ \frac{y_{old_{ij}}}{\sum_{j=1}^{4}y_{old_{ij}}} & ,\,\text{for}\,\sum_{j=1}^{4}y_{old_{ij}}>0\\ Missing & ,\,Otherwise \end{cases} \end{eqnarray*}$$ $i$

 A. (i=1) Artistic activity:  10% 
 B. (i=2) Government support: 0% 
 C. (i=3) Private pension: 30% 
 D. (i=1) Activities not related with arts:  40%

จากนั้นคุณจะบันทึกซ้ำดังนี้:

$$\begin{eqnarray*} y_{new_{i1}} & = & \frac{10}{10+0+30+40}=\frac{10}{80}=12.5\%\\ y_{new_{i2}} & = & \frac{0}{10+0+30+40}=\frac{0}{80}=00.0\%\\ y_{new_{i3}} & = & \frac{30}{10+0+30+40}=\frac{30}{80}=37.5\%\\ y_{new_{i4}} & = & \frac{40}{10+0+30+40}=\frac{40}{80}=50.0\% \end{eqnarray*}$$

โปรดทราบว่าตอนนี้เปอร์เซ็นต์ใหม่ทั้งหมดจะเพิ่มเป็น 100% ไม่ว่าคุณจะทำอะไรโปรดตรวจสอบให้แน่ใจว่าคุณทำการแปลงชัดเจนมากเมื่อรายงานผลลัพธ์ของคุณและฉันคิดว่า @ rolando2 ให้คำแนะนำที่ยอดเยี่ยมเกี่ยวกับวิธีการวิเคราะห์ความอ่อนไหวเพื่อดูว่าการเปลี่ยนแปลงเช่นนี้อาจส่งผลต่อข้อสรุปของคุณอย่างไร