ImageNet: lỗi top-five có nghĩa là gì?

9

Một trong những phương pháp đánh giá cho Cuộc thi ImageNet (phân loại 1.000 hình ảnh danh mục) là lỗi top 5, điều đó có nghĩa là gì?

Xem: http://www.image-net.org/challenges/LSVRC/

machine-learning classification computer-vision

— RockTheStar
nguồn

8

Lỗi Top-5, còn được gọi là lỗi thứ hạng 5 chỉ đơn giản là một sự xuất hiện của số liệu lỗi Rank-N với $(N=5)$ .

Lỗi thứ hạng $N$ là tỷ lệ của các mẫu thử $x_i$ trong đó nhãn chính xác $y_i$ không xuất hiện trong kết quả dự đoán hàng đầu $N$ của mô hình khi kết quả được sắp xếp theo thứ tự độ tin cậy giảm hoặc $P(y_i|x_i)$ .

Trong ILSVRC 2014 , số liệu lỗi để phân loại là:

e = \frac{1}{n} \cdot \sum_{k} min_{i} d (c_{i}, C_{k})

$e = \tfrac{1}{n} \cdot \sum_k \min_{i} d(c_i, C_k)$

Ở đâu

d (a, b) = {\begin{cases} 0 & if a = b \\ 1 & otherwise \end{cases}

$d(a, b) = \begin{cases} 0 & \text{if } a = b \\ 1 & \text{otherwise} \end{cases}$

$c_i$ là nhãn dự đoán và là nhãn sự thật mặt đất. Có nhãn có thể có . $C_k$ $n$ $k=1, ..., n$

— sabalaba
nguồn

Tuyệt quá! Một làm rõ, c và viết hoa C có nghĩa là gì?

— RockTheStar

Ở đây big C là một trong những nhãn sự thật mặt đất và little c là một trong những nhãn được dự đoán.

— sabalaba

1

sabalaba - bạn có thể thêm thông tin đó vào câu trả lời của bạn không?

— Glen_b -Reinstate Monica

3

tỷ lệ lỗi top 5 (của một mô hình) là tỷ lệ hình ảnh thử nghiệm mà nhãn chính xác không nằm trong số năm nhãn được xem là có thể xảy ra nhất bởi mô hình [ 1 ]

— Debvrat Varshney
nguồn

1

Tôi nghĩ rằng đánh giá có điều kiện của nên đọc: , nếu xảy ra trong N phân loại có thể xảy ra hàng đầu cho một lớp Bk sự thật mặt đất nhất định. = 1, nếu không. $d(A_i, B_k)$ $d(Ai, Bk) = 0$ $A_i$

Ở đây k lấy các giá trị 0 đến N-1. Trong đó N là số lớp. Đối với mỗi , có phân loại có thể xảy ra, trong đó tôi lấy các giá trị [0, N-1] $B_k$ $A_i$

— RM Nair
nguồn