ImageNet: apa artinya kesalahan lima besar?

9

Salah satu metode evaluasi untuk Kompetisi ImageNet (mengklasifikasikan 1.000 kategori gambar) adalah kesalahan top-5, apa artinya itu?

Lihat: http://www.image-net.org/challenges/LSVRC/

machine-learning classification computer-vision

— RockTheStar
sumber

8

Kesalahan Top-5, juga dikenal sebagai kesalahan peringkat-5 hanyalah contoh metrik kesalahan Peringkat-N dengan . $(N=5)$

Kesalahan Peringkat adalah fraksi sampel uji mana label yang benar tidak muncul di atas hasil prediksi model ketika hasil diurutkan dalam urutan menurun kepercayaan, atau . $N$ $x_i$ $y_i$ $N$ $P(y_i|x_i)$

Di ILSVRC 2014 , metrik galat untuk klasifikasi adalah:

e = \frac{1}{n} \cdot \sum_{k} min_{i} d (c_{i}, C_{k})

$e = \tfrac{1}{n} \cdot \sum_k \min_{i} d(c_i, C_k)$

dimana

d (a, b) = {\begin{cases} 0 & if a = b \\ 1 & otherwise \end{cases}

$d(a, b) = \begin{cases} 0 & \text{if } a = b \\ 1 & \text{otherwise} \end{cases}$

$c_i$ adalah label yang diramalkan dan adalah label kebenaran dasar. Ada kemungkinan label dengan . $C_k$ $n$ $k=1, ..., n$

— sabalaba
sumber

Bagus! Satu klarifikasi, apa arti huruf c dan huruf kapital C?

— RockTheStar

Di sini C besar adalah salah satu label kebenaran dasar dan c kecil adalah salah satu label yang diprediksi.

— sabalaba

1

sabalaba - dapatkah Anda menambahkan informasi itu ke jawaban Anda?

— Glen_b -Reinstate Monica

3

tingkat kesalahan top-5 (dari model) adalah fraksi dari gambar uji yang label yang benar tidak di antara lima label yang dianggap paling mungkin oleh model [ 1 ]

— Debvrat Varshney
sumber

1

Saya pikir evaluasi kondisional dari harus berbunyi: , jika muncul di atas N kemungkinan klasifikasi untuk kelas kebenaran dasar yang diberikan Bk. = 1, jika tidak. $d(A_i, B_k)$ $d(Ai, Bk) = 0$ $A_i$

Di sini k mengambil nilai 0 hingga N-1. Di mana N adalah jumlah kelas. Untuk setiap , ada klasifikasi kemungkinan , di mana saya mengambil nilai [0, N-1] $B_k$ $A_i$

— RM Nair
sumber