Statistik dan Big Data

Saya berpikir untuk membangun model yang memprediksi rasio , di mana a ≤ b dan a > 0 dan b > 0 . Jadi, rasionya adalah antara 0 dan 1 .a/ba/ba/ba≤ba≤ba \le ba>0a>0a > 0b>0b>0b > 0000111 Saya bisa menggunakan regresi linier, meskipun secara alami tidak membatasi ke 0..1. Saya …

42 regression  logistic  generalized-linear-model  beta-distribution  beta-regression 

Saya menemukan istilah kebingungan yang mengacu pada probabilitas invers log-rata pada data yang tidak terlihat. Artikel Wikipedia tentang kebingungan tidak memberikan makna intuitif untuk hal yang sama. Ukuran kebingungan ini digunakan dalam kertas pLSA . Adakah yang bisa menjelaskan kebutuhan dan makna intuitif dari ukuran kebingungan ?

42 measurement  perplexity 

Saya telah menemukan bahwa Imagenet dan CNN besar lainnya menggunakan lapisan normalisasi respons lokal. Namun, saya tidak dapat menemukan banyak informasi tentang mereka. Seberapa penting mereka dan kapan mereka harus digunakan? Dari http://caffe.berkeleyvision.org/tutorial/layers.html#data-layers : "Lapisan normalisasi respons lokal melakukan semacam" penghambatan lateral "dengan menormalkan lebih dari daerah input lokal. Dalam …

41 deep-learning  convolution  conv-neural-network 

Lihatlah kutipan ini dari "Buku pegangan keterampilan belajar", Palgrave, 2012, oleh Stella Cottrell, halaman 155: Persentase Perhatikan kapan persentase diberikan. Misalkan, pernyataan di atas berbunyi: 60% orang lebih suka jeruk; 40% mengatakan mereka lebih suka apel. Ini terlihat meyakinkan: Jumlah numerik diberikan. Tetapi apakah perbedaan antara 60% dan 40% signifikan …

41 statistical-significance  sample-size  percentage 

Saya tahu pertanyaan ini telah ditanyakan satu miliar kali, jadi, setelah mencari online, saya sepenuhnya yakin bahwa korelasi antara 2 variabel tidak menyiratkan sebab-akibat. Dalam salah satu kuliah statistik saya hari ini, kami mendapat kuliah tamu dari seorang ahli fisika, tentang pentingnya metode statistik dalam fisika. Dia mengatakan pernyataan yang …

41 correlation  mathematical-statistics  causality 

Baru-baru ini saya memiliki perselisihan dengan seorang teman tentang meminimalkan kemungkinan kematian di pesawat karena kecelakaan. Ini adalah pertanyaan statistik yang belum sempurna. Dia menyatakan bahwa dia lebih suka terbang langsung ke tujuan, karena mengurangi kemungkinan dia akan mati dalam kecelakaan pesawat. Logikanya adalah jika probabilitas kecelakaan penerbangan komersial adalah …

41 independence  transportation 

Momentum digunakan untuk mengurangi fluktuasi perubahan berat selama iterasi berurutan:αα\alpha Δ ωsaya( t + 1 ) =- η∂E∂wsaya+ α Δωsaya( t ) ,Δωsaya(t+1)=-η∂E∂wsaya+αΔωsaya(t),\Delta\omega_i(t+1) = - \eta\frac{\partial E}{\partial w_i} + \alpha \Delta \omega_i(t), mana adalah fungsi kesalahan, - vektor bobot, - tingkat pembelajaran.E( w )E(w)E({\bf w})ww{\bf w}ηη\eta Pembusukan berat menghukum perubahan …

41 neural-networks  optimization  regularization  gradient-descent 

EDIT 2: Awalnya saya pikir saya perlu menjalankan ANOVA dua faktor dengan tindakan berulang pada satu faktor, tapi saya sekarang berpikir model efek campuran linear akan bekerja lebih baik untuk data saya. Saya pikir saya hampir tahu apa yang perlu terjadi, tetapi saya masih bingung dengan beberapa poin. Eksperimen yang …

41 r  anova  mixed-model  repeated-measures  lme4-nlme 

Apakah Pandas, Statsmodels, dan Scikit-mempelajari berbagai implementasi pembelajaran mesin / statistik yang berbeda, atau apakah ini saling melengkapi satu sama lain? Manakah dari ini yang memiliki fungsi paling komprehensif? Yang mana yang dikembangkan dan / atau didukung secara aktif? Saya harus menerapkan regresi logistik. Adakah saran untuk yang mana yang …

41 machine-learning  python  scikit-learn  statsmodels  pandas 

(Ini didasarkan pada pertanyaan yang baru saja datang kepada saya melalui email; Saya telah menambahkan beberapa konteks dari percakapan singkat sebelumnya dengan orang yang sama.) Tahun lalu saya diberitahu bahwa distribusi gamma lebih berat daripada lognormal, dan sejak itu saya diberitahu bahwa bukan itu masalahnya. Yang ini lebih berat ekor? …

41 distributions  gamma-distribution  lognormal  heavy-tailed 

Apakah ada game yang membuat pemain "berpikir seperti ahli statistik"? Misalnya, lightbot membuat Anda "berpikir seperti seorang programmer" (dengan cara yang sangat mendasar). Apakah ada permainan - yang dirancang untuk hiburan atau pengajaran - yang dapat membantu Anda merasa nyaman dengan konsep-konsep dasar seperti korelasi, nilai-p, kuadrat terkecil, varian, berbagai …

41 teaching  games  application 

Saya baru saja memainkan permainan dengan anak-anak saya yang pada dasarnya bermuara pada: siapa pun yang menggulung setiap angka setidaknya sekali pada die 6-sisi menang. Saya menang, akhirnya, dan yang lainnya selesai 1-2 putaran kemudian. Sekarang saya bertanya-tanya: apa harapan dari panjang permainan? Saya tahu bahwa harapan jumlah gulungan sampai …

41 probability  dice  coupon-collector-problem 

Bisakah Anda menyarankan beberapa film bagus yang melibatkan matematika, probabilitas dll? Salah satu contohnya adalah 21 . Saya juga tertarik pada film yang melibatkan algoritma (mis. Dekripsi teks). Secara umum film "geeky" dengan teori ilmiah terkenal tetapi tidak ada fiksi ilmiah atau film dokumenter. Terima kasih sebelumnya!

41 probability  references 

Saya melihat konsep 'pertukaran' digunakan dalam konteks yang berbeda (misalnya, model bayesian) tetapi saya tidak pernah memahami istilah ini dengan sangat baik. Apa konsep ini? Dalam keadaan apa konsep ini digunakan dan mengapa?

41 bayesian  intuition  exchangeability 

Saya akan mencoba lingkungan gaya BUGS untuk memperkirakan model Bayesian. Apakah ada keuntungan penting untuk dipertimbangkan dalam memilih antara OpenBugs atau JAGS? Apakah salah satu akan menggantikan yang lain di masa mendatang? Saya akan menggunakan Gibbs Sampler yang dipilih dengan R. Saya belum memiliki aplikasi spesifik, tetapi saya sedang memutuskan …

41 r  software  bugs  jags  gibbs