Sự khác biệt giữa điểm AUC và điểm F1 là gì?

Điểm F1 là giá trị trung bình hài hòa của độ chính xác và thu hồi. Trục y của thu hồi là tỷ lệ dương thực sự (cũng là thu hồi). Vì vậy, đôi khi các phân loại có thể có mức thu hồi thấp nhưng AUC rất cao, điều đó có nghĩa là gì?

Sự khác biệt giữa điểm AUC và điểm F1 là gì?

Điểm F1 được áp dụng cho bất kỳ điểm cụ thể nào của đường cong ROC. Điểm này có thể đại diện cho một giá trị ngưỡng cụ thể trong phân loại nhị phân và do đó tương ứng với một giá trị cụ thể của độ chính xác và thu hồi.

Hãy nhớ rằng, điểm F là một cách thông minh để thể hiện cả thu hồi và độ chính xác. Để điểm F cao, cả độ chính xác và thu hồi phải cao.

Do đó, đường cong ROC dành cho các mức ngưỡng khác nhau và có nhiều giá trị điểm F cho các điểm khác nhau trên đường cong của nó.

AUC có kích thước [PRECISION] * [RECALL] và đó là khu vực dưới đường cong ROC. F1 là cho một cặp chính xác và thu hồi cố định . Vì vậy, họ là khác nhau. Nhưng có một số kết nối. Xem điều này: http://pages.cs.wisc.edu/~jdavis/davisgoadrichcamera2.pdf

Các trục của đường cong ROC là tỷ lệ dương thực sự (thu hồi, độ nhạy AKA) và tỷ lệ dương tính giả (tỷ lệ cảnh báo sai) , không phải chính xác, AKA PPV, giá trị tiên đoán dương .