Một mẫu có thể quá lớn cho ANOVA hoặc thử nghiệm t?

9

Tôi có gần một triệu bộ dữ liệu và bất cứ khi nào tôi chạy thử nghiệm so sánh trung bình, ANOVA hoặc thử nghiệm t, tôi đều nhận được mức ý nghĩa nhỏ hơn 0,0001 trên SPSS. Tôi lo ngại rằng mẫu của tôi lớn đến mức tất nhiên khi tôi so sánh các phương tiện thì nó sẽ hiển thị khác nhau đáng kể. Một mẫu có thể quá lớn cho ANOVA hoặc thử nghiệm t?

— người dùng24232
nguồn

3

Câu hỏi được bao phủ khá tốt, vì vậy chỉ cần một nhận xét - đó là một câu hỏi mà bạn đang hỏi một câu hỏi mà bạn đã biết câu trả lời (bạn không thực sự nghĩ rằng dân số có nghĩa là chính xác , phải không?), Và bạn có đủ cỡ mẫu để đưa ra câu trả lời rõ ràng nhưng không thú vị lắm - thực tế có sự khác biệt, ngay cả khi chúng nhỏ. Kích thước hiệu ứng và khoảng tin cậy hữu ích hơn giá trị p và các câu hỏi thú vị của bạn có xu hướng đi sâu hơn đến các vấn đề sai lệch và mô tả sự khác biệt đang có và đánh giá tầm quan trọng thực tế của chúng.

— Glen_b -Reinstate Monica

16

Không, một mẫu không thể quá lớn đối với ANOVA hoặc thử nghiệm t. Bạn gần như sẽ luôn nhận được kết quả có ý nghĩa thống kê bởi vì bạn có rất nhiều quyền lực; tuy nhiên, điều này không có nghĩa là bạn phát hiện ra sự khác biệt là sai. Thật vậy, bất kể bạn có bao nhiêu trường hợp, một hiệu ứng không tồn tại sẽ không trở nên đáng kể. Đây là một quan niệm sai lầm phổ biến.

Tuy nhiên, rất nhiều sức mạnh có nghĩa là bạn có thể phát hiện ra sự khác biệt gần như vô nghĩa về kích thước. Ví dụ, có thể bạn thấy rằng hai chủng tộc trung bình có chiều cao khác nhau, nhưng sự khác biệt chỉ là nửa milimet.

Đảm bảo diễn giải kích thước hiệu ứng liên quan đến kiểm tra thống kê của bạn. Trong trường hợp này, giá trị p có giá trị nhỏ hơn kích thước hiệu ứng (như thường thấy)!

— Behacad
nguồn

Hoàn toàn chính xác (+1). Vấn đề duy nhất mà tôi có thể thấy là nếu bạn gặp vấn đề về bộ nhớ và thời gian thực hiện. Với các máy tính hiện đại, tôi nghĩ rằng sẽ mất hơn 1 triệu trường hợp cho những việc đơn giản như ANOVA hoặc kiểm tra t.

— Peter Flom

Điều gì xảy ra khi cỡ mẫu bằng với kích thước quần thể? Làm thế nào để chọn một giá trị p sau đó?

— Sharath

2

Suggst bạn nhìn vào sau đây (tất cả rất dễ đọc và phi kỹ thuật).
1. Anderson DR, Burnham KP, Thompson WL (2000) Thử nghiệm giả thuyết Null: Các vấn đề, tỷ lệ lưu hành và một giải pháp thay thế. Tạp chí Quản lý động vật hoang dã 64: 912-923. 2. Gigerenzer G (2004) Thống kê không suy nghĩ. Tạp chí kinh tế xã hội 33: 587-606. 3. Johnson DH (1999) Tầm quan trọng của kiểm tra ý nghĩa thống kê. Tạp chí Quản lý động vật hoang dã 63: 763-772.

— Tom Wishing
nguồn