Pertanyaan yang diberi tag «deep-learning»

Saya bertanya-tanya dalam situasi apa menguntungkan menumpuk LSTM?

14 machine-learning  neural-network  deep-learning  lstm 

Bagaimana Anda menggunakan LeakyRelu sebagai fungsi aktivasi dalam urutan DNN di keras? Jika saya ingin menulis sesuatu yang mirip dengan: model = Sequential() model.add(Dense(90, activation='LeakyRelu')) Apa solusinya? Masukkan LeakyRelu mirip dengan Relu? Pertanyaan kedua adalah: apa pengaturan umum terbaik untuk menyetel parameter LeakyRelu? Kapan kinerjanya secara signifikan lebih baik daripada …

14 deep-learning  keras  activation-function 

Saya mencoba untuk memahami makalah ini dan tidak yakin apa upampling bi-linear. Adakah yang bisa menjelaskan hal ini pada level tinggi? https://arxiv.org/abs/1606.00915

13 deep-learning  convnet  cnn  convolution 

Saya ingin tahu apakah keturunan Gradient adalah algoritma utama yang digunakan dalam pengoptimal seperti Adam, Adagrad, RMSProp dan beberapa pengoptimal lainnya.

13 machine-learning  neural-network  deep-learning  optimization  gradient-descent 

Saya mencoba menemukan yang setara dengan Diagram Hinton untuk jaringan multilayer untuk merencanakan bobot selama pelatihan. Jaringan terlatih agak mirip dengan Deep SRN, yaitu ia memiliki sejumlah besar matriks banyak berat yang akan membuat plot simultan dari beberapa Diagram Hinton secara visual membingungkan. Adakah yang tahu cara yang bagus untuk …

13 machine-learning  neural-network  visualization  deep-learning 

Jika menghapus beberapa neuron menghasilkan model yang berkinerja lebih baik, mengapa tidak menggunakan jaringan saraf yang lebih sederhana dengan lebih sedikit lapisan dan lebih sedikit neuron di tempat pertama? Mengapa membangun model yang lebih besar dan lebih rumit pada awalnya dan menekan bagian-bagiannya nanti?

13 machine-learning  deep-learning  keras  regularization  dropout 

Jika kita melihat 90-99% dari makalah yang diterbitkan menggunakan CNN (ConvNet). Sebagian besar dari mereka menggunakan ukuran filter angka ganjil : {1, 3, 5, 7} untuk yang paling banyak digunakan. Situasi ini dapat menyebabkan beberapa masalah: Dengan ukuran filter ini, biasanya operasi konvolusi tidak sempurna dengan padding 2 (padding umum) …

13 deep-learning  convnet  computer-vision  convolution 

Saya membaca ini: Untuk melatih jaringan saraf kita, kita akan menginisialisasi setiap parameter W (l) ijWij (l) dan setiap b (l) ibi (l) ke nilai acak kecil mendekati nol (katakan menurut Normal (0, ϵ2) Normal (0 , ϵ2) distribusi untuk beberapa ϵϵ kecil, katakan 0,01) dari Stanford Deep, tutorial pembelajaran …

13 deep-learning  stanford-nlp  randomized-algorithms 

Saya memiliki pemahaman umum yang baik tentang peran dan mekanisme lapisan konvolusional dalam Pembelajaran Jauh untuk pemrosesan gambar dalam kasus implementasi 2D atau 3D - mereka "hanya" mencoba menangkap pola 2D dalam gambar (dalam 3 saluran dalam kasus 3D). Tetapi baru-baru ini saya bertemu lapisan konvolusional 1D dalam konteks Natural …

13 deep-learning  nlp  convolution 

Apakah ada metode untuk menghitung interval prediksi (distribusi probabilitas) di sekitar perkiraan deret waktu dari jaringan saraf LSTM (atau berulang lainnya)? Katakanlah, misalnya, saya memprediksi 10 sampel ke masa depan (t + 1 hingga t + 10), berdasarkan pada 10 sampel terakhir yang diamati (t-9 hingga t), saya berharap prediksi …

13 machine-learning  deep-learning  time-series  prediction  lstm 

Dikatakan di Wikipedia dan deeplearning4j bahwa Deep-learning NN (DLNN) adalah NN yang memiliki> 1 lapisan tersembunyi. NN semacam ini adalah standar di universitas bagi saya, sementara DLNN sangat bergairah saat ini. Pernah ke sana, melakukan itu - apa masalahnya? Saya mendengar juga bahwa NN yang ditumpuk dianggap sebagai pembelajaran yang …

13 neural-network  deep-learning 

Saat menggunakan panggilan balik Penghentian Awal dalam pelatihan Keras berhenti saat beberapa metrik (biasanya kehilangan validasi) tidak meningkat. Apakah ada cara untuk menggunakan metrik lain (seperti ketepatan, penarikan, ukuran-f) alih-alih kehilangan validasi? Semua contoh yang saya lihat sejauh ini mirip dengan yang ini: callbacks.EarlyStopping (monitor = 'val_loss', sabar = 5, …

13 machine-learning  neural-network  deep-learning  keras 

Saat ini saya mencoba memahami arsitektur CNN. Saya mengerti konvolusi, layer ReLU, pooling layer, dan layer yang sepenuhnya terhubung. Namun, saya masih bingung dengan bobotnya. Dalam jaringan saraf normal, masing-masing neuron memiliki beratnya sendiri. Pada lapisan yang terhubung penuh, masing-masing neuron juga akan memiliki beratnya sendiri. Tapi yang saya tidak …

13 machine-learning  neural-network  deep-learning  image-classification  cnn 

Saya mencoba menerapkan lapisan bersama di Keras. Saya memang melihat bahwa Keras memiliki keras.layers.concatenate, tetapi saya tidak yakin dari dokumentasi tentang penggunaannya. Bisakah saya menggunakannya untuk membuat beberapa lapisan bersama? Apa cara terbaik untuk mengimplementasikan jaringan saraf berbagi sederhana seperti yang ditunjukkan di bawah ini menggunakan Keras? Perhatikan bahwa semua …

12 machine-learning  neural-network  deep-learning  keras  multitask-learning 

Sebagian besar model pembelajaran mendalam seperti VGG, ResNet, dll. Memerlukan gambar persegi sebagai input, biasanya dengan ukuran piksel .224 x 224224x224224x224 Apakah ada alasan mengapa input harus memiliki bentuk yang sama, atau dapatkah saya membangun model convnet dengan mengatakan juga (jika saya ingin melakukan pengenalan wajah misalnya dan saya memiliki …

12 deep-learning  image-classification  image-recognition