jumlah parameter untuk lapisan konvolusi

Dalam makalah yang sangat dikutip ini , penulis memberikan diskusi berikut tentang jumlah parameter berat. Saya tidak begitu jelas mengapa ia memiliki parameter . Saya pikir itu harus karena masing-masing saluran input berbagi filter yang sama, yang memiliki parameter. $49C^2$ $49C$ $C$ $49$

machine-learning deep-learning computer-vision

— pengguna297850
sumber

Menggunakan gambar di sini mengurangi kualitas pertanyaan karena tidak dapat dicari. Silakan pertimbangkan menggunakan teks sebagai gantinya.

— Neil Slater

Sebenarnya itu , pertama adalah jumlah saluran input, dan kedua $49C*C$ $C$ $C$ adalah jumlah filter.

Kutipan dari CS231n :

Untuk meringkas, Lapisan Conv:

Menerima volume ukuran $W_1 \times H_1 \times D_1$

Membutuhkan empat hiperparameter:

Jumlah filter $K$ ,

tingkat spasial mereka $F$ ,

langkah , $S$

jumlah nol bantalan . $P$

Menghasilkan volume ukuran mana: $W_2 \times H_2 \times D_2$

$W_2 = (W_1 - F + 2P)/S + 1$

(yaitu lebar dan tinggi dihitung sama oleh simetri) $H_2 = (H_1 - F + 2P)/S + 1$

$D_2 = K$

Dengan berbagi parameter, memperkenalkan bobot per filter, untuk total bobot dan bias. $F \cdot F \cdot D_1$ $(F \cdot F \cdot D_1) \cdot K$ $K$

Dalam volume output, irisan kedalaman -th (ukuran ) adalah hasil dari melakukan konvolusi yang valid dari filter -th di atas volume input dengan langkah , dan kemudian diimbangi dengan - Biasnya. $d$ $W_2 \times H_2$ $d$ $S$ $d$

Pengaturan umum dari hiperparameter adalah . Namun, ada konvensi dan aturan umum yang memotivasi hiperparameter ini. Lihat bagian arsitektur ConvNet di bawah ini. $F = 3, S = 1, P = 1$

— Icyblade
sumber

Hai Icyblade, terima kasih atas jawabannya. Namun, pertanyaan saya masih terkait dengan pernyataan "dengan berbagi parameter, ini memperkenalkan bobot FFD1 per filter '. Kita tahu bahwa setiap filter tunggal memiliki dua koneksi ke saluran input D1, jadi menurut pernyataan ini, berat yang menghubungkan filter ini berbeda di antara saluran input yang berbeda, apakah itu benar?

— user297850

Nilai bobot ini berbeda, tetapi angkanya sama.

— Icyblade

Menggunakan pasta gambar di sini mengurangi kualitas jawaban karena tidak dapat dicari. Silakan pertimbangkan menggunakan teks sebagai gantinya. Namun, saya setuju dengan jawabannya - sepertinya benar bagi saya.

— Neil Slater

@ user297850: Tolong jangan sampaikan pertanyaan Anda - tanyakan yang baru jika Anda masih memiliki masalah.

— Neil Slater

@NeilSlater Terima kasih atas tip Anda, saya butuh waktu untuk memformat ulang.

— Icyblade