Statistik dan Big Data

Saya membaca makalah HMC pengantar yang luar biasa dari Prof. Michael Betancourt, tetapi saya terjebak dalam pemahaman bagaimana kita memilih pilihan distribusi momentum. Ringkasan Ide dasar dari HMC adalah untuk memperkenalkan variabel momentum dalam hubungannya dengan variabel target . Mereka bersama-sama membentuk ruang fase .pppqqq Energi total dari sistem konservatif …

8 mcmc  monte-carlo  hmc 

Masalah ini telah muncul dalam penelitian saya: anggaplah bahwa adalah distribusi eksponensial (ED) iid dengan mean dan biarkan menjadi nomor non-negatif. Benarkah Ini melewati pemeriksaan kewarasan, karena nilai yang diharapkan dari kedua belah pihak sama dengan , dan jika kita membiarkan , maka sisi kiri sama dengan , yang eksponensial. …

8 distributions  mathematical-statistics  poisson-distribution  exponential  saddlepoint-approximation 

Pembelajaran mendalam adalah topik yang semakin panas saat ini. Apa asumsi utama yang membuat pembelajaran mendalam kurang dalam beberapa set data. Mis: Apakah kinerjanya baik pada set data yang bising?

8 machine-learning  mathematical-statistics  deep-learning 

Dalam pembelajaran penguatan, apakah suatu kebijakan selalu deterministik, atau apakah itu suatu distribusi probabilitas atas tindakan (dari mana kami mengambil sampel)? Jika kebijakan bersifat deterministik, mengapa bukan fungsi nilai, yang didefinisikan pada kondisi tertentu untuk kebijakan tertentu sebagai berikutππ\pi Vπ( s ) = E[∑t > 0γtrt|s0= s , π]Vπ(s)=E[∑t>0γtrt|s0=s,π]V^{\pi}(s) = …

8 reinforcement-learning  deterministic-policy  stochastic-policy 

Cukup intuitif bahwa sebagian besar topologi / arsitektur jaringan saraf tidak dapat diidentifikasi. Tapi apa saja hasil yang terkenal di lapangan? Apakah ada kondisi sederhana yang memungkinkan / mencegah pengidentifikasian? Sebagai contoh, semua jaringan dengan fungsi aktivasi nonlinear dan lebih dari satu lapisan tersembunyi tidak dapat diidentifikasi semua jaringan dengan …

8 neural-networks  conv-neural-network  rnn  identifiability 

Katakanlah saya memperkirakan regresi linier multivariat berikut Bagaimana saya bisa mengujinya ?y=β0+β1x1+β2x2+β3x3+β4x4+ ϵy=β0+β1x1+β2x2+β3x3+β4x4+ϵ y = \beta_0 +\beta_1 x_1 +\beta_2 x_2+\beta_3x_3+\beta_4x_4 + \epsilonβ1=β2=β3β1=β2=β3\beta_1=\beta_2=\beta_3 Saya tahu itu untuk menguji apakah Anda cukup membuat tes dengan β1=β2β1=β2\beta_1=\beta_2ZZZZ=β1-β2se2β1+ se2β2---------√Z=β1-β2seβ12+seβ22 Z = \frac{\beta_1-\beta_2}{\sqrt{se_{\beta_1}^2+se_{\beta_2}^2}} Apakah ada analog untuk estimasi koefisien berganda?

8 regression  hypothesis-testing  multiple-regression 

Saya punya dataset dengan 338 prediktor dan 570 instance (sayangnya tidak dapat diunggah) di mana saya menggunakan Lasso untuk melakukan pemilihan fitur. Secara khusus, saya menggunakan cv.glmnetfungsi dari glmnetsebagai berikut, di mana mydata_matrixmatriks biner 570 x 339 dan hasilnya adalah biner: library(glmnet) x_dat <- mydata_matrix[, -ncol(mydata_matrix)] y <- mydata_matrix[, ncol(mydata_matrix)] …

8 r  classification  lasso  glmnet 

Pada level model, untuk menilai kontribusi / kepentingan prediktor, kita dapat menggunakan: Model Teknik Khusus - mis. Kemurnian (Indeks Gini) untuk model berbasis pohon, koefisien model jika dapat diterapkan, dll. Model Teknik Independen - misalnya Pentingnya Fitur Permutasi, Ketergantungan Sebagian, dll. Apa yang tidak disampaikan ini adalah untuk prediksi tertentu …

8 machine-learning  predictive-models 

Penelitian yang saya ulas ini melaporkan tinggi rata-rata untuk 20 subjek sebagai 1,70 meter dengan standar deviasi 0,0. Apakah ini berarti semua 20 tepat 1,70 meter? Atau apakah ini kesalahan pelaporan?

8 standard-deviation  reporting 

Saya mencoba untuk memahami apa perbedaan antara anil simulasi dan menjalankan beberapa algoritma mendaki bukit serakah. Pada pemahaman saya, algoritma serakah akan mendorong skor ke maksimum lokal, tetapi jika kita mulai dengan beberapa konfigurasi acak dan menerapkan serakah untuk semuanya, kita akan memiliki beberapa maksimum lokal. Lalu kami memilih maks …

8 machine-learning  optimization  algorithms 

Ditutup . Pertanyaan ini perlu lebih fokus . Saat ini tidak menerima jawaban. Ingin meningkatkan pertanyaan ini? Perbarui pertanyaan sehingga berfokus pada satu masalah hanya dengan mengedit posting ini . Ditutup 2 tahun yang lalu . Saya seorang Bayesian yang berpikiran sederhana yang merasa nyaman di dunia Bayes yang nyaman. …

8 bayesian  references  frequentist 

Pertanyaan ini tampaknya cukup mendasar sehingga saya yakin telah dijawab di suatu tempat, tetapi saya belum menemukannya. Saya mengerti bahwa jika variabel dependen dalam regresi terdistribusi normal, kemungkinan maksimum dan kuadrat terkecil biasa menghasilkan estimasi parameter yang sama. Ketika variabel dependen tidak terdistribusi secara normal, estimasi parameter OLS tidak lagi …

8 regression  maximum-likelihood  least-squares  blue 

Bisakah para ahli Monte Carlo kami menjelaskan ekspektasi "tak terduga" di akhir jawaban ini ? Ringkasan ex post facto dari pertanyaan / jawaban lain: jika adalah variabel acak IID dan harapan ada, maka argumen simetri sederhana menunjukkan bahwa , tetapi percobaan Monte Carlo dengan tampaknya bertentangan dengan proposisi ini.X1,…,XnX1,…,XnX_1,\dots,X_nE[Xi/X¯]E[Xi/X¯]\mathrm{E}[X_i/\bar{X}]E[Xi/X¯]=1E[Xi/X¯]=1\mathrm{E}[X_i/\bar{X}]=1Xi∼N(0,1)Xi∼N(0,1)X_i\sim\mathrm{N}(0,1) x …

8 probability  simulation  expected-value  monte-carlo 

Jadi ada Standar Deviasi, Varian, dan Kovarian, tetapi apakah ada standar deviasi? Jika tidak, mengapa tidak? Apakah ada alasan matematika yang mendasar atau itu hanya konvensi? Jika demikian mengapa tidak digunakan lebih banyak, atau setidaknya sangat sulit ditemukan menggunakan pencarian Google? Saya tidak bermaksud ini menjadi pertanyaan sembrono, saya mencoba …

8 variance  standard-deviation  covariance-matrix 

Apakah Anda tahu referensi atau nama untuk cara berikut untuk menyelidiki apakah teknik pemodelan yang kompleks TTT Apakah bias? Menerapkan TTTke kumpulan data asli. Ukur kinerjanya (mis. R-kuadrat dalam pengaturan regresi). Secara acak mengubah variabel respons untuk mendapatkan kumpulan data baru. MenerapkanTTT dan mengukur kinerjanya P′P′P'. [Jika pengamatannya tergantung, langkah …

8 terminology  bias  validation  permutation-test