Statistik dan Big Data

Saya telah mencoba memahami algoritma Metropolis-Hastings untuk menulis kode untuk memperkirakan parameter model (yaitu ). Menurut bibliografi, algoritma Metropolis-Hastings memiliki langkah-langkah berikut:f( x ) = a ∗ xf(x)=Sebuah∗xf(x)=a*x HasilkanYt∼ q( y| xt)Yt∼q(y|xt)Y_t \sim q(y|x^t) Xt + 1= { Yt,xt,dengan probabilitasρ ( xt, Yt) ,dengan probabilitas1 - ρ ( xt, Yt) …

14 mcmc  metropolis-hastings 

Saya ingin tahu apakah seseorang dapat memberi tahu saya jika saya telah menghitung interval kepercayaan untuk perbedaan antara dua proporsi dengan benar. Ukuran sampel adalah 34, dimana 19 adalah perempuan dan 15 adalah laki-laki. Oleh karena itu, perbedaan proporsi adalah 0,1176471. Saya menghitung interval kepercayaan 95% untuk perbedaan antara -0,1183872 …

14 r  confidence-interval 

Baru-baru ini, pertanyaan penelusuran acak memicu memori komentar tidak langsung dari salah satu profesor saya beberapa tahun yang lalu memperingatkan tentang penggunaan rasio dalam model regresi. Jadi saya mulai membaca tentang ini, akhirnya menuju ke Kronmal 1993. Saya ingin memastikan bahwa saya benar menafsirkan sarannya tentang cara memodelkan ini. Untuk …

14 regression  modeling  interaction  weighted-regression  ratio 

Saya hanya ingin tahu apakah regresi Poisson memiliki istilah kesalahan? Dapatkah regresi Poisson memiliki efek acak dan istilah kesalahan? Saya bingung tentang hal ini. Dalam regresi logistik, tidak ada istilah kesalahan karena variabel hasil Anda adalah biner. Apakah itu satu-satunya model glm yang tidak memiliki istilah residual?

14 regression  mixed-model  generalized-linear-model  poisson-regression 

Bayangkan pengaturan berikut: Anda memiliki 2 koin, koin A yang dijamin adil, dan koin B yang mungkin atau mungkin tidak adil. Anda diminta untuk melakukan 100 koin terbalik, dan tujuan Anda adalah memaksimalkan jumlah kepala . Informasi Anda sebelumnya tentang koin B adalah bahwa koin itu dibalik 3 kali dan …

14 bayesian  decision-theory 

Adakah yang bisa membantu menjelaskan beberapa matematika di balik klasifikasi dalam CART? Saya ingin memahami bagaimana dua tahap utama terjadi. Sebagai contoh, saya melatih classifier CART pada dataset dan menggunakan dataset pengujian untuk menandai kinerja prediktifnya tetapi: Bagaimana akar awal pohon dipilih? Mengapa dan bagaimana masing-masing cabang dibentuk? Dataset saya …

14 regression  classification  data-mining  cart 

Saya memiliki variabel acak X0,X1,…,XnX0,X1,…,XnX_0,X_1,\dots,X_n . X0X0X_0 memiliki distribusi normal dengan rata-rata μ>0μ>0\mu>0 dan varian 111 . The X1,…,XnX1,…,XnX_1,\dots,X_n rvs terdistribusi normal dengan rata-rata 000 dan varians 111 . Semuanya saling independen. Misalkan EEE menunjukkan peristiwa bahwa X0X0X_0 adalah yang terbesar dari ini, yaitu, X0>max(X1,…,Xn)X0>max(X1,…,Xn)X_0 > \max(X_1,\dots,X_n) . Saya ingin …

14 probability  normal-distribution 

Saya baru mulai belajar menggunakan Stan dan rstan. Kecuali saya selalu bingung tentang cara kerja JAGS / BUGS, saya pikir Anda selalu harus mendefinisikan distribusi jenis sebelumnya untuk setiap parameter dalam model yang akan diambil. Tampaknya Anda tidak harus melakukan ini di Stan berdasarkan pada dokumentasinya. Berikut contoh model yang …

14 mcmc  prior  jags  graphical-model  stan 

Baru-baru ini saya menerapkan filter Kalman pada contoh sederhana mengukur posisi partikel dengan kecepatan dan percepatan acak. Saya menemukan bahwa filter Kalman bekerja dengan baik, tetapi saya kemudian bertanya pada diri sendiri apa perbedaan antara ini dan hanya melakukan rata-rata bergerak? Saya menemukan bahwa jika saya menggunakan jendela sekitar 10 …

14 smoothing  kalman-filter 

Dalam pemodelan iklim, Anda mencari model yang dapat menggambarkan iklim Bumi secara memadai. Ini termasuk menunjukkan pola yang semi-siklus: hal-hal seperti Osilasi Selatan El Nino. Tetapi verifikasi model umumnya terjadi dalam periode waktu yang relatif singkat, di mana ada data pengamatan yang layak (~ 150 tahun terakhir). Ini berarti bahwa …

14 time-series  model-comparison  fourier-transform  climate 

Saya ingin tahu perbedaan antara analisis data panel & analisis model campuran. Sepengetahuan saya, baik data panel & model campuran menggunakan efek tetap & acak. Jika demikian, mengapa mereka memiliki nama yang berbeda? Atau apakah mereka identik? Saya telah membaca posting berikut, yang menjelaskan definisi efek tetap, acak & campuran, …

14 mixed-model  references  panel-data 

Apakah ada ringkasan yang bagus (ulasan, buku) tentang berbagai aplikasi rantai Markov Monte Carlo (MCMC)? Saya telah melihat Markov Chain Monte Carlo dalam Praktek , tetapi buku ini sepertinya agak lama. Apakah ada lebih banyak buku terbaru tentang berbagai aplikasi MCMC di berbagai bidang seperti pembelajaran mesin, visi komputer, dan …

14 machine-learning  mcmc  inference  references  application 

Saya telah membuat model linear umum dengan variabel respon tunggal (kontinu / terdistribusi normal) dan 4 variabel penjelas (3 di antaranya adalah faktor dan yang keempat adalah integer). Saya telah menggunakan distribusi kesalahan Gaussian dengan fungsi tautan identitas. Saya saat ini memeriksa bahwa model memenuhi asumsi model linear umum, yaitu: …

14 regression  generalized-linear-model  ancova  assumptions  scatterplot 

Pertimbangkan dua gambar skala abu-abu ini: Gambar pertama menunjukkan pola sungai yang berkelok-kelok. Gambar kedua menunjukkan noise acak. Saya mencari ukuran statistik yang dapat saya gunakan untuk menentukan apakah ada kemungkinan gambar menunjukkan pola sungai. Gambar sungai memiliki dua area: sungai = nilai tinggi dan di tempat lain = nilai …

14 variance  spatial  pattern-recognition 

Misalkan saya memiliki beberapa beberapa variabel respon yang diukur dari th saudara di keluarga th. Selain itu, beberapa data perilaku dikumpulkan secara bersamaan dari masing-masing subjek. Saya mencoba menganalisis situasi dengan model efek campuran linier berikut:yijyijy_{ij}jjjiiixijxijx_{ij} yij=α0+α1xij+δ1ixij+εijyij=α0+α1xij+δ1ixij+εijy_{ij} = \alpha_0 + \alpha_1 x_{ij} + \delta_{1i} x_{ij} + \varepsilon_{ij} di mana dan …

14 mixed-model  lme4-nlme  covariance-matrix  non-independent