Pertanyaan yang diberi tag «neural-network»

Katakanlah saya memiliki gambar panah panah dari atas ke bawah, dan saya ingin memprediksi sudut yang dihasilkan panah ini. Ini akan berada di antara dan derajat, atau antara dan . Masalahnya adalah bahwa target ini melingkar, dan derajat persis sama yang merupakan invarian yang ingin saya sertakan dalam target saya, …

15 neural-network  deep-learning  loss-function  parameter-estimation 

Katakanlah saya telah melakukan transfer pembelajaran pada jaringan pra-terlatih untuk mengenali 10 objek. Bagaimana cara menambahkan item ke-11 yang dapat diklasifikasi jaringan tanpa kehilangan semua 10 kategori yang sudah saya latih atau informasi dari model pra-latih yang asli? Seorang teman memberi tahu saya bahwa penelitian aktif sedang berlangsung di bidang …

15 neural-network  deep-learning 

Saat membaca tentang pembuatan teks dengan Jaringan Syaraf Berulang, saya perhatikan bahwa beberapa contoh diimplementasikan untuk menghasilkan kata demi kata teks dan lainnya karakter demi karakter tanpa benar-benar menyatakan mengapa. Jadi, apa perbedaan antara model RNN yang memprediksi basis teks per kata dan yang memprediksi basis teks per-char ? Apakah …

15 machine-learning  neural-network  nlp  rnn 

Saya telah mempelajari jenis fungsi aktivasi untuk jaringan saraf. Fungsinya sendiri cukup mudah, tetapi perbedaan aplikasi tidak sepenuhnya jelas. Masuk akal bahwa seseorang membedakan antara fungsi tipe logis dan linier, tergantung pada biner / output kontinu yang diinginkan tetapi apa keuntungan dari fungsi sigmoid dibandingkan fungsi linier sederhana? ReLU sangat …

15 neural-network  activation-function 

Saat ini saya sedang mempersiapkan ujian pada jaringan saraf. Dalam beberapa protokol dari ujian sebelumnya saya membaca bahwa fungsi aktivasi neuron (dalam multilayer perceptrons) harus monotonik. Saya mengerti bahwa fungsi aktivasi harus dapat dibedakan, memiliki turunan yang bukan 0 pada kebanyakan poin, dan bersifat non-linear. Saya tidak mengerti mengapa menjadi …

15 machine-learning  neural-network 

Saya menggunakan Brain untuk melatih jaringan saraf pada set fitur yang mencakup nilai-nilai positif dan negatif. Tetapi Brain membutuhkan nilai input antara 0 dan 1. Apa cara terbaik untuk menormalkan data saya?

15 machine-learning  neural-network  feature-scaling  normalization  javascript 

Saya melatih jaringan saraf convolutional untuk mengklasifikasikan gambar pada kondisi kabut (3 kelas). Namun, untuk masing-masing sekitar 150.000 gambar saya juga memiliki empat variabel meteorologis yang tersedia yang dapat membantu dalam memprediksi kelas-kelas gambar. Saya bertanya-tanya bagaimana saya bisa menambahkan variabel meteorologi (misalnya suhu, kecepatan angin) ke struktur CNN yang …

14 machine-learning  neural-network  deep-learning  tensorflow  cnn 

Saya bertanya-tanya dalam situasi apa menguntungkan menumpuk LSTM?

14 machine-learning  neural-network  deep-learning  lstm 

Saya telah membangun model LSTM untuk memprediksi pertanyaan duplikat pada dataset resmi Quora. Label uji adalah 0 atau 1. 1 menunjukkan pasangan pertanyaan duplikat. Setelah membangun model menggunakan model.fit, saya menguji model menggunakan model.predictpada data uji. Outputnya adalah array nilai seperti di bawah ini: [ 0.00514298] [ 0.15161049] [ 0.27588326] …

14 machine-learning  python  neural-network  keras  lstm 

Dari pemahaman saya, Algoritma Genetika adalah alat yang ampuh untuk optimasi multi-tujuan. Selain itu, pelatihan Neural Networks (terutama yang dalam) sulit dan memiliki banyak masalah (fungsi biaya non-cembung - minimum lokal, menghilang dan meledak gradien dll). Juga saya secara konseptual melatih NN dengan GA layak. Saya bertanya-tanya, mengapa mereka tidak …

13 neural-network  optimization  genetic-algorithms 

Saya ingin tahu apakah keturunan Gradient adalah algoritma utama yang digunakan dalam pengoptimal seperti Adam, Adagrad, RMSProp dan beberapa pengoptimal lainnya.

13 machine-learning  neural-network  deep-learning  optimization  gradient-descent 

Saya punya sub-pertanyaan kecil untuk pertanyaan ini . Saya mengerti bahwa ketika kembali-merambat melalui lapisan pooling max gradien dirutekan kembali dengan cara yang neuron di lapisan sebelumnya yang dipilih sebagai max mendapatkan semua gradien. Yang saya tidak yakin 100% adalah bagaimana gradien pada lapisan berikutnya akan dialihkan kembali ke lapisan …

13 machine-learning  neural-network  convnet  backpropagation 

Saya mencoba menemukan yang setara dengan Diagram Hinton untuk jaringan multilayer untuk merencanakan bobot selama pelatihan. Jaringan terlatih agak mirip dengan Deep SRN, yaitu ia memiliki sejumlah besar matriks banyak berat yang akan membuat plot simultan dari beberapa Diagram Hinton secara visual membingungkan. Adakah yang tahu cara yang bagus untuk …

13 machine-learning  neural-network  visualization  deep-learning 

Saya bukan ahli autoencoder atau jaringan saraf dengan cara apa pun, jadi maafkan saya jika ini adalah pertanyaan konyol. Untuk tujuan pengurangan dimensi atau memvisualisasikan cluster dalam data dimensi tinggi, kita dapat menggunakan autoencoder untuk membuat representasi 2 dimensi (lossy) dengan memeriksa output dari lapisan jaringan dengan 2 node. Sebagai …

13 neural-network  dimensionality-reduction  autoencoder 

Saya telah membaca beberapa makalah tentang inisialisasi kernel dan banyak makalah yang menyebutkan bahwa mereka menggunakan L2 regularisasi kernel (seringkali dengan ).λ=0.0001λ=0.0001\lambda = 0.0001 Adakah yang melakukan sesuatu yang berbeda dari menginisialisasi bias dengan nol konstan dan tidak mengaturnya? Makalah inisialisasi kernel Mishkin dan Matas: Yang Anda butuhkan adalah init …

13 neural-network