Xác định các câu hỏi vô dụng từ một bảng câu hỏi

Tôi đang phát triển một bảng câu hỏi. Để cải thiện độ tin cậy và hiệu lực của nó, tôi muốn sử dụng các phương pháp thống kê.

Tôi muốn loại bỏ những câu hỏi mà câu trả lời luôn giống nhau. Điều này có nghĩa là gần như tất cả những người tham gia đã đưa ra những câu trả lời giống nhau cho những câu hỏi đó.

Bây giờ câu hỏi của tôi là:

1. Thuật ngữ kỹ thuật cho những câu hỏi vô dụng như vậy có câu trả lời luôn giống nhau, độc lập với bối cảnh sử dụng là gì?
2. Phương pháp để xác định các câu hỏi như vậy là gì?

Cả lý thuyết kiểm tra cổ điển (CTT) và lý thuyết phản hồi vật phẩm (IRT) đều có thể cung cấp hướng dẫn cho đến khi mặt hàng nào đóng góp vào đặc điểm tiềm ẩn mà bạn muốn đo, và không. Với CTT, hãy xem xét 1) độ khó của vật phẩm, 2) tương quan vật phẩm với tổng điểm, 3) phương sai của vật phẩm và 4) tác động đến ước tính thống nhất nội bộ (ví dụ: alpha của Cronbach) nếu vật phẩm bị xóa.

Các mục quá dễ hoặc quá khó có xu hướng không giúp tách biệt chủ đề (phân biệt giữa người ghi điểm cao và người ghi điểm thấp). Trừ khi bạn quan tâm đến việc đo lường sự khác biệt giữa những người thực hiện hàng đầu, những câu hỏi rất khó nên được xem xét để loại bỏ. Trong một tĩnh mạch tương tự, các mặt hàng rất dễ dàng chỉ phù hợp nếu bạn quan tâm đến hiệu suất của hiệu suất thấp.

Tất cả các mục nên tương quan tích cực với tổng điểm và bạn có thể đặt giới hạn dưới cho tương quan đó khoảng 0,20 làm hướng dẫn. Tương quan thấp hoặc tương quan tiêu cực có thể chỉ ra rằng có những vấn đề từ ngữ trong bảng câu hỏi của bạn và câu hỏi nên được đảo ngược ghi điểm.

Các mục có phương sai thấp (độ biến thiên của điểm số) nên được xem xét để loại bỏ vì chúng không tách rời các đối tượng và không đóng góp vào thông tin thu thập được từ khảo sát. Các mục có phương sai rất cao có thể đo lường một cái gì đó khác với cấu trúc / đặc điểm bạn muốn đo.

Nếu ước tính về tính nhất quán bên trong được cải thiện với mục bị xóa, thì mục đó cần được xem xét để xóa hoặc viết lại.

Các mục mà mọi người đều nhận được đôi khi là các mục tối đa và những mục đó mọi người đều nhận được đôi khi được gọi là các mục tối thiểu. Họ không đóng góp cho thông tin bạn đang cố gắng thu thập.

Nếu bạn đang phát triển một bảng câu hỏi cổ phần cao hoặc kế hoạch tiếp thị bảng câu hỏi, bạn chắc chắn nên xem xét IRT. Tuy nhiên, đây là một lĩnh vực chủ đề lớn và trừ khi bạn thực sự quan tâm thì có lẽ không đáng để có không gian để vào đây.

Hi vọng điêu nay co ich.

Tôi tin rằng những gì bạn đang tìm kiếm là Lý thuyết đáp ứng vật phẩm. Những câu hỏi "vô dụng" mà bạn đề cập đến là những mục có sự phân biệt đối xử kém. Sử dụng phân tích IRT, bạn có thể tính toán sự phân biệt đối xử, độ khó và xác suất đoán liên quan đến các mục của những người tham gia khảo sát. Chương trình R có một gói dễ dàng để sử dụng IRT và tôi tưởng tượng các gói phần mềm thống kê khác cũng làm như vậy.

Nếu bạn muốn có một cái nhìn tổng quan nhanh ở đây là trang wikipedia, nhưng tôi sẽ khuyên bạn nên nghiên cứu thêm. http://en.wikipedia.org/wiki/Item_response_theory