Ý nghĩa thống kê của các thay đổi theo thời gian đối với mặt hàng Likert 5 điểm


9

Bối cảnh:

Tôi có hai bộ dữ liệu từ cùng một bảng câu hỏi trong hơn hai năm. Mỗi câu hỏi được đo bằng thang đo 5 Likert.

Q1: Sơ đồ mã hóa

Hiện tại, tôi đã mã hóa các câu trả lời của mình trong khoảng [0, 1], với 0 có nghĩa là "phản hồi tiêu cực nhất", 1 có nghĩa là "phản hồi tích cực nhất" và các phản hồi khác cách đều nhau giữa.

  • Lược đồ mã hóa "tốt nhất" để sử dụng cho thang đo Likert là gì?

Tôi nhận ra rằng điều này có thể là một chút chủ quan.

Q2: Ý nghĩa qua các năm

  • Cách tốt nhất để xác định liệu có sự thay đổi có ý nghĩa thống kê trong hai năm không?

Đó là, nhìn vào kết quả cho câu hỏi 1 cho mỗi năm, làm thế nào để tôi biết nếu sự khác biệt giữa kết quả năm 2011 và kết quả năm 2010 có ý nghĩa thống kê? Tôi đã có một hồi ức mơ hồ về bài kiểm tra t của Học sinh đang được sử dụng ở đây, nhưng tôi không chắc chắn.

Câu trả lời:


7

1. Sơ đồ mã hóa

Về mặt đánh giá ý nghĩa thống kê bằng cách sử dụng kiểm tra t, đó là khoảng cách tương đối giữa các điểm tỷ lệ quan trọng. Do đó, (0, 0,25, 0,5, 0,75, 1) tương đương với (1, 2, 3, 4, 5). Theo kinh nghiệm của tôi, một sơ đồ mã hóa khoảng cách bằng nhau, chẳng hạn như các sơ đồ được đề cập trước đây là phổ biến nhất và có vẻ hợp lý cho các mục Likert. Nếu bạn khám phá tỷ lệ tối ưu, bạn có thể rút ra một sơ đồ mã hóa thay thế.

2. Kiểm tra thống kê

Câu hỏi về cách đánh giá sự khác biệt của nhóm đối với một mặt hàng Likert đã được trả lời ở đây .

Vấn đề đầu tiên là liệu bạn có thể liên kết các quan sát qua hai thời điểm hay không. Có vẻ như bạn đã có một mẫu khác nhau. Điều này dẫn đến một vài lựa chọn:

  • Kiểm tra nhóm độc lập : đây là một lựa chọn đơn giản; nó cũng kiểm tra sự khác biệt trong phương tiện nhóm; những người theo chủ nghĩa thuần túy sẽ lập luận rằng giá trị p có thể không hoàn toàn chính xác; tuy nhiên, tùy thuộc vào mục đích của bạn, nó có thể đầy đủ.
  • Kiểm tra bootstrapping về sự khác biệt trong nhóm có nghĩa là : Nếu bạn vẫn muốn kiểm tra sự khác biệt giữa các phương tiện nhóm nhưng không thoải mái với tính chất rời rạc của biến phụ thuộc, thì bạn có thể sử dụng bootstrap để tạo khoảng tin cậy từ đó bạn có thể rút ra suy luận về thay đổi trong nhóm .
  • Thử nghiệm Mann-Whitney U (trong số các thử nghiệm không tham số khác): Một thử nghiệm như vậy không giả định tính quy phạm, nhưng nó cũng đang thử nghiệm một giả thuyết khác.

Vì vậy, tóm lại, bạn thấy không có gì sai với những gì tôi đề xuất (mã hóa khoảng cách bằng nhau, kiểm tra ý nghĩa kiểm tra t), ngoài những lựa chọn khác có thể chính xác hơn?
Mac

@Mac Theo tôi, đến từ góc độ ứng dụng, đó là cách tiếp cận đơn giản, dễ hiểu, dễ giao tiếp và nói chung là hợp lý. Tuy nhiên, thường đáng để xem xét các cấu trúc quan tâm bằng cách sử dụng tỷ lệ thay vì các mục riêng lẻ.
Jeromy Anglim

đã đồng ý. Tuy nhiên, tôi tin rằng những gì tôi cần điều này sẽ làm. Cảm ơn nhiều!
Mac

chỉ cần lưu ý rằng bài kiểm tra t có thể khá nhạy cảm với sự khác biệt về phương sai, vì vậy đó có thể là điều cần kiểm tra trước khi bạn đưa ra quyết định cuối cùng
richiemorrisroe

@Mac / cc @richiemorrisroe Theo quan điểm của tôi, ngoài giả định về tính đồng nhất (có phần bị phá vỡ với thử nghiệm của Welch), vấn đề chủ yếu là với các phân phối phản ứng không đối xứng (hiệu ứng trần hoặc sàn), thường phát sinh khi sử dụng vật phẩm Likert.
chl

3

Wilcoxon Ranksum Test aka Mann-Whitney là cách để đi trong trường hợp dữ liệu thứ tự. Giải pháp bootstrapping cũng thanh lịch mặc dù không phải là cách "cổ điển". Phương pháp Bootstrapping cũng có thể có giá trị trong trường hợp bạn nhắm đến những thứ khác như phân tích nhân tố. Trong trường hợp phân tích hồi quy, bạn có thể chọn probit có trật tự hoặc logit được đặt hàng làm đặc tả mô hình.

BTW: Nếu thang đo của bạn có phạm vi lớn hơn (> 10 giá trị cho mỗi biến), bạn có thể sử dụng kết quả làm biến số liệu, sẽ giúp kiểm tra t trở thành lựa chọn an toàn. Được khuyến khích rằng điều này là một chút bẩn và có thể được coi là công việc của quỷ.

dì ghẻ


1
Bạn có thể mở rộng về cách bootstrap cung cấp một cách tiếp cận thú vị hơn để phân tích nhân tố không?
chl

Tôi sẽ quan tâm đến việc tìm hiểu thêm về lý do tại sao bài kiểm tra Mann-Whitney sẽ được ưa chuộng hơn bài kiểm tra t ở đây.
whuber
Khi sử dụng trang web của chúng tôi, bạn xác nhận rằng bạn đã đọc và hiểu Chính sách cookieChính sách bảo mật của chúng tôi.
Licensed under cc by-sa 3.0 with attribution required.