Kiểm tra ý nghĩa về sự khác biệt của hệ số tương quan của Spearman

(Cảm ơn rất nhiều vì đã trả lời nhanh! Tôi đã làm một công việc kém khi đặt câu hỏi, vì vậy hãy để tôi thử lại.)

Tôi không biết làm thế nào để tìm hiểu xem sự khác biệt giữa hai mối tương quan của Spearman có ý nghĩa thống kê hay không. Tôi muốn biết làm thế nào để tìm ra nó.

Lý do tôi muốn tìm hiểu là trong bài báo sau: Giải thích ngữ nghĩa dựa trên Wikipedia để xử lý ngôn ngữ tự nhiên , của Gabrilovich và Markovitch ( Tạp chí Nghiên cứu trí tuệ nhân tạo 34 (2009) 443-498).

Trong Bảng 2 (trang 457), các tác giả đang chỉ ra rằng phương pháp của họ (ESA-Wikipedia) đạt được mối tương quan của Spearman cao hơn và có ý nghĩa thống kê so với các phương pháp khác và tôi muốn làm như vậy để cho thấy rằng phương pháp của tôi tốt hơn trước phương pháp cho một số vấn đề.

Tôi không biết làm thế nào họ tính toán ý nghĩa thống kê, và tôi muốn biết. Tác giả của bài báo đã nói rằng mối tương quan xếp hạng của Spearman được coi là tương quan của Pearson. Tôi không chắc đó có phải là cách làm đúng hay không. Tôi có hai mối tương quan của Spearman và tôi muốn biết liệu sự khác biệt giữa chúng có ý nghĩa thống kê hay không.

Tôi biết rằng các trang web, chẳng hạn như http://facemony.vassar.edu/lowry/rdiff.html , cung cấp máy tính trực tuyến để có được sự khác biệt giữa hai tương quan của Pearson. Tôi không thể tìm thấy một máy tính trực tuyến tương tự cho sự khác biệt giữa hai mối tương quan của Spearman.

Một giải pháp từ liên kết được cung cấp bởi Peter Flom

LƯU Ý: Các quy trình chỉ hỗ trợ các tương quan của Spearman dưới 0,6.

Hãy = Fisher biến đổi của mối tương quan quan sát của bộ , = Fisher biến đổi của mối tương quan quan sát của bộ . $z_A$ $A$ $z_B$ $B$
Với , hãy để , trong đó là biến đổi Fisher của tập của một bên trái- loại bỏ mối tương quan thu được bằng cách xóa , xếp hạng lại và tính toán lại mối tương quan. (Mỗi được dựa trên cặp, mỗi xóa chỉ là tạm thời, cho rằng tôi chỉ, không phải vĩnh viễn.) Lặp lại cho bộ . $i = 1,\dots,n$ $y_{A_i} = nz_A- (n - 1)z_{A'i}$ $z_{A'i}$ $A$ $(x_i,y_i)$ $z_{A'i}$ $n-1$ $B$
$\bar y_A = \sum y_{A_i}/n$ là biến đổi Fisher được biết đến. Lặp lại cho bộ . $B$
$v_{\bar y_A} = \sum (y_{A_i}-\bar y_A)^2 /(n(n-1))$ là phương sai của . Lặp lại cho bộ . $\bar y_A$ $B$
Sử dụng một -test heteroscedastic (Welch-Satterthwaite) để so sánh hai ước tính không xác định: $t$

t = = \frac{{\bar{y}}_{Một} - {\bar{y}}_{B}}{\sqrt{v_{{\bar{y}}_{Một}} + v_{{\bar{y}}_{B}}}}, df = = \frac{(v_{{\bar{y}}_{Một}} + v_{{\bar{y}}_{B}})^{2}}{\frac{v_{{\bar{y}}_{Một}}^{2}}{n_{Một} - 1} + \frac{v_{{\bar{y}}_{B}}^{2}}{n_{B} - 1}}

$t = \frac{\bar y_A - \bar y_B}{\sqrt{v_{\bar y_A} + v_{\bar y_B}}},\quad \text{df}=\frac{(v_{\bar y_A} + v_{\bar y_B})^2}{\frac{v_{\bar y_A}^2}{n_A-1}+\frac{v_{\bar y_B}^2}{n_B-1}}$ trong đó và là số lượng mẫu của tập và tương ứng.

n_{A}

$n_A$

n_{B}

$n_B$

A

$A$

B

$B$

Trước khi chỉnh sửa lần đầu

Tôi đã có một bộ xếp hạng được xếp hạng theo con người (CON NGƯỜI-RANKING), một bộ xếp hạng được tạo bởi phương pháp phổ biến hiện nay được sử dụng (PRESENT-RANKING), và cuối cùng là một bộ xếp hạng được tạo bởi phương pháp mục đích của tôi (MY-RANKING) .

Tôi đã tính toán mối tương quan của Spearman giữa NGUỒN NHÂN LỰC và NGÂN HÀNG HIỆN TẠI. Hãy để tôi gọi đây là: CON NGƯỜI-HIỆN TẠI-NGHIÊN CỨU.

Sau đó tôi phát hiện ra mối tương quan của Spearman giữa NGUỒN NHÂN LỰC và NGÂN HÀNG CỦA TÔI. Hãy để tôi gọi đây là: CON NGƯỜI-TÔI-NGƯỜI.

Làm thế nào tôi có thể tìm hiểu xem sự khác biệt giữa CON NGƯỜI-NGƯỜI-NGƯỜI-NGƯỜI-NGƯỜI và NGƯỜI-NGÀY-NGÀY-NĂM-NĂM có ý nghĩa thống kê không?

hypothesis-testing statistical-significance spearman-rho

— Patrick Chan
nguồn

Chào mừng Patrick. Tôi đang vật lộn với vấn đề tương tự nhưng với Pearson r. Nếu bạn kiểm tra các mục của tôi, bạn sẽ có cảm giác về những gì bạn có thể làm.

— Adhesh Josh

Mặc dù bạn có thể yêu cầu đóng khung câu hỏi này theo thuật ngữ thống kê - sẽ hữu ích nếu chúng tôi biết chính xác bạn quan tâm đến điều gì. Bạn có quan tâm đến sự gần gũi của mối tương quan (Điểm số dự đoán lẫn nhau) hoặc sự tồn tại của mối quan hệ nhiều hơn cơ hội Cho rằng bạn dường như đã xếp hạng dữ liệu, lặp đi lặp lại theo thời gian có thể hữu ích để đọc một số hệ số tương quan trong lớp. Tôi hy vọng tôi có quyền, câu hỏi không hoàn toàn rõ ràng.

— rosser

Cảm ơn Adhesh và rosser. Tôi xin lỗi vì mô tả nghèo nàn của tôi về câu hỏi của tôi. Tôi đã viết lại nó. Hy vọng nó đã trở thành một câu hỏi dễ hiểu.

— Patrick Chan

Chào! Tôi hiện đang vật lộn với cùng một vấn đề. Bạn có bao giờ có một mã sẵn sàng thực hiện đề xuất của bạn? Ngoài ra, tại sao nó chỉ hoạt động cho các giá trị tương quan dưới 0,6?

— fsociety

Bài viết mà bạn trích dẫn giải thích phương pháp theo các thuật ngữ sau:

[...] chúng tôi cho thấy ý nghĩa thống kê của sự khác biệt giữa hiệu suất của phiên bản ESA-Wikipedia (ngày 26 tháng 3 năm 2006)) và của các thuật toán khác bằng cách sử dụng phép biến đổi z của Fisher (Press, Teukolsky, Vetterling, & Flannery, Numerical Bí quyết trong C: Nghệ thuật tính toán khoa học . Nhà xuất bản Đại học Cambridge, 1997, Mục 14,5).

Tôi khuyên bạn nên theo dõi tài liệu tham khảo đó hoặc xem trang Wikipedia về hệ số Spearman để biết chi tiết.

— Guillermo G.
nguồn

Cảm ơn Guillermo. Tôi đã nghi ngờ rằng họ coi mối tương quan xếp hạng của Spearman là tương quan của Pearson và tính toán sự khác biệt của hai mối tương quan của Pearson. Tuy nhiên, dường như nó không phải là cách chính xác để làm điều đó, và vì vậy tôi đang thực hiện một bài viết ở đây.

— Patrick Chan

Bạn có thể biết về một triển khai làm việc (tốt nhất là trực tuyến) bởi vì đây là những gì OP đang theo đuổi?

— chl