Statistik dan Big Data

Dalam implementasi Tensorflow dari ResNet , saya menemukan mereka menggunakan initializer penskalaan varians, saya juga menemukan xavier initializer populer. Saya tidak punya terlalu banyak pengalaman dalam hal ini, mana yang lebih baik dalam praktiknya?

20 machine-learning  neural-networks  deep-learning  conv-neural-network  tensorflow 

Saya memiliki dua variabel yang tidak menunjukkan banyak korelasi ketika diplot terhadap satu sama lain sebagaimana adanya, tetapi hubungan linier yang sangat jelas ketika saya memetakan log masing-masing variabel terhadap yang lain. Jadi saya akan berakhir dengan model tipe: log(Y)=alog(X)+blog⁡(Y)=alog⁡(X)+b\log(Y) = a \log(X) + b , yang sangat bagus secara …

20 regression  correlation  log 

Saya telah bekerja dengan beberapa data yang memiliki beberapa masalah dengan pengukuran berulang. Dengan melakukan itu saya memperhatikan perilaku yang sangat berbeda antara lme()dan lmer()menggunakan data pengujian saya dan ingin tahu mengapa. Kumpulan data palsu yang saya buat memiliki pengukuran tinggi dan berat badan untuk 10 subjek, masing-masing diambil dua …

20 r  mixed-model  lme4-nlme 

Saya mencoba untuk menulis sebuah program dalam R yang mensimulasikan angka acak semu dari distribusi dengan fungsi distribusi kumulatif: F(x)=1−exp(−ax−bp+1xp+1),x≥0F(x)=1−exp⁡(−ax−bp+1xp+1),x≥0F(x)= 1-\exp \left(-ax-\frac{b}{p+1}x^{p+1}\right), \quad x \geq 0 di manaa,b>0,p∈(0,1)a,b>0,p∈(0,1)a,b>0, p \in (0,1) Saya mencoba inverse transform sampling tetapi kebalikannya tampaknya tidak dapat dipecahkan secara analitis. Saya akan senang jika Anda bisa …

20 r  random-generation 

Kutipan berikut berasal dari makalah penelitian terkenal Statistik signifikansi untuk studi luas genom oleh Storey & Tibshirani (2003): Sebagai contoh, tingkat positif palsu 5% berarti bahwa rata-rata 5% dari fitur yang benar-benar nol dalam penelitian akan disebut signifikan. FDR (False Discovery rate) 5% berarti bahwa di antara semua fitur yang …

20 hypothesis-testing  false-discovery-rate  type-i-and-ii-errors  confusion-matrix  false-positive-rate 

Saya telah melakukan penelitian tentang overfitting dan underfitting, dan saya telah mengerti apa itu sebenarnya, tetapi saya tidak dapat menemukan alasannya. Apa alasan utama untuk overfitting dan underfitting? Mengapa kita menghadapi dua masalah ini dalam melatih model?

20 machine-learning  dataset  overfitting 

Saya sedang melakukan beberapa pekerjaan dalam scipy dan percakapan muncul dengan anggota kelompok inti scipy apakah variabel acak diskrit non-negatif dapat memiliki momen yang tidak ditentukan. Saya pikir dia benar tetapi tidak memiliki bukti yang berguna. Adakah yang bisa menunjukkan / membuktikan klaim ini? (atau jika klaim ini tidak benar, …

20 mathematical-statistics  expected-value 

Saya baru sadar bahwa saya selalu mengatasi masalah regresi di mana variabel independen selalu numerik. Dapatkah saya menggunakan regresi linier dalam kasus di mana semua variabel independen bersifat kategorikal?

20 regression  categorical-data 

Saya mencoba menggunakan contoh yang dijelaskan dalam dokumentasi Keras bernama "Stacked LSTM untuk klasifikasi urutan" (lihat kode di bawah) dan tidak dapat menemukan input_shapeparameter dalam konteks data saya. Saya telah memasukkan matriks urutan 25 karakter yang mungkin dikodekan dalam bilangan bulat ke urutan empuk dengan panjang maksimum 31. Sebagai hasilnya, …

20 lstm  keras  shape  dimensions 

Sepertinya dalam probabilitas sehari-hari (bukan fisika kuantum), probabilitas benar-benar hanya pengganti yang tidak diketahui. Ambil flip koin misalnya. Kami mengatakan itu "acak," perubahan kepala 50% dan kemungkinan ekor 50%. Namun, jika saya tahu persis kepadatan, ukuran, dan bentuk koin; kepadatan udara; dengan seberapa besar kekuatan koin itu terbalik; di mana …

20 probability  philosophical 

Saya menjalankan percobaan kecil dengan regresi LASSO dalam R untuk menguji apakah ia dapat menemukan pasangan prediktor yang sempurna. Pasangan didefinisikan seperti ini: f1 + f2 = hasil Hasilnya di sini adalah vektor yang telah ditentukan yang disebut 'usia'. F1 dan f2 dibuat dengan mengambil setengah dari vektor usia dan …

20 r  regression  feature-selection  lasso  high-dimensional 

Adakah contoh di mana dua tes yang dapat dipertahankan yang berbeda dengan kemungkinan proporsional akan mengarahkan seseorang pada kesimpulan yang sangat berbeda (dan sama-sama dapat dipertahankan), misalnya, di mana nilai-p adalah urutan besaran yang berjauhan, tetapi kekuatan untuk alternatif serupa? Semua contoh yang saya lihat sangat konyol, membandingkan binomial dengan …

20 mathematical-statistics  likelihood  philosophical  likelihood-principle 

Saya sedang berurusan dengan Model Linear Hierarchical Bayesian , di sini jaringan menggambarkannya. YYY merupakan penjualan harian suatu produk di supermarket (diamati). XXX adalah matriks regresi yang diketahui, termasuk harga, promosi, hari dalam seminggu, cuaca, hari libur. 1SSS adalah tingkat persediaan laten yang tidak diketahui dari setiap produk, yang menyebabkan …

20 regression  bayesian  neural-networks  generalized-linear-model  bayesian-network 

Saya meninjau makalah yang telah melakukan> 15 tes Chi Square 2x2 terpisah. Saya telah menyarankan bahwa mereka perlu mengoreksi beberapa perbandingan, tetapi mereka telah menjawab mengatakan bahwa semua perbandingan telah direncanakan, dan karena itu ini tidak perlu. Saya merasa ini tidak boleh benar tetapi tidak dapat menemukan sumber daya yang …

20 hypothesis-testing  multiple-comparisons 

Kami memiliki banyak diskusi bagus tentang pemisahan sempurna dalam regresi logistik. Seperti, Regresi logistik dalam R menghasilkan pemisahan sempurna (fenomena Hauck-Donner). Sekarang apa? dan model regresi logistik tidak bertemu . Saya pribadi masih merasa itu tidak intuitif mengapa itu akan menjadi masalah dan mengapa menambahkan regularisasi akan memperbaikinya. Saya membuat …

20 logistic  generalized-linear-model  optimization  intuition  separation