Statistik dan Big Data

T&J untuk orang-orang yang tertarik dalam statistik, pembelajaran mesin, analisis data, penambangan data, dan visualisasi data


2
dispersi dalam ringkasan.glm ()
Saya melakukan glm.nb oleh glm1<-glm.nb(x~factor(group)) dengan kelompok menjadi kategororial dan x menjadi variabel metrik. Ketika saya mencoba untuk mendapatkan ringkasan hasil, saya mendapatkan hasil yang sedikit berbeda, tergantung pada apakah saya menggunakan summary()atau summary.glm. summary(glm1)memberi saya ... Coefficients: Estimate Std. Error z value Pr(>|z|) (Intercept) 0.1044 0.1519 0.687 0.4921 factor(gruppe)2 …

1
Hamiltonian Monte Carlo dan ruang parameter diskrit
Aku baru saja mulai membangun model di stan ; untuk membangun keakraban dengan alat ini, saya sedang mengerjakan beberapa latihan di Bayesian Data Analysis (2nd ed.). The Waterbuck latihan mengandaikan bahwa data , dengan ( N , θ ) tidak diketahui. Karena Hamiltonian Monte Carlo tidak mengizinkan parameter diskrit, saya …





3
Autokovarians proses ARMA (2,1) - derivasi model analitik untuk
Saya perlu mendapatkan ekspresi analitik untuk fungsi autocovariance γ(k)γ(k)\gamma\left(k\right) dari proses ARMA (2,1) yang dilambangkan oleh: yt=ϕ1yt−1+ϕ2yt−2+θ1ϵt−1+ϵtyt=ϕ1yt−1+ϕ2yt−2+θ1ϵt−1+ϵty_t=\phi_1y_{t-1}+\phi_2y_{t-2}+\theta_1\epsilon_{t-1}+\epsilon_t Jadi, saya tahu itu: γ(k)=E[yt,yt−k]γ(k)=E[yt,yt−k]\gamma\left(k\right) = \mathrm{E}\left[y_t,y_{t-k}\right] jadi saya bisa menulis: γ(k)=ϕ1E[yt−1yt−k]+ϕ2E[yt−2yt−k]+θ1E[ϵt−1yt−k]+E[ϵtyt−k]γ(k)=ϕ1E[yt−1yt−k]+ϕ2E[yt−2yt−k]+θ1E[ϵt−1yt−k]+E[ϵtyt−k]\gamma\left(k\right) = \phi_1 \mathrm{E}\left[y_{t-1}y_{t-k}\right]+\phi_2 \mathrm{E}\left[y_{t-2}y_{t-k}\right]+\theta_1 \mathrm{E}\left[\epsilon_{t-1}y_{t-k}\right]+\mathrm{E}\left[\epsilon_{t}y_{t-k}\right] kemudian, untuk mendapatkan versi analitik dari fungsi autocovariance, saya perlu mengganti nilai kkk - 0, 1, …

2
Proses AR (1) dengan kesalahan pengukuran heteroskedastik
1. Masalahnya Saya memiliki beberapa pengukuran variabel , di mana , di mana saya memiliki distribusi diperoleh melalui MCMC, yang untuk kesederhanaan saya akan menganggapnya sebagai gaussian rata-rata dan varians \ sigma_t ^ 2 .ytyty_tt=1,2,..,nt=1,2,..,nt=1,2,..,nfyt(yt)fyt(yt)f_{y_t}(y_t)μtμt\mu_tσ2tσt2\sigma_t^2 Saya punya model fisik untuk pengamatan itu, katakanlah g(t)g(t)g(t) , tetapi residual rt=μt−g(t)rt=μt−g(t)r_t = \mu_t-g(t) …



1
Dengan validasi silang k-fold, apakah Anda rata-rata semua model
Saat melakukan validasi silang k-fold, saya memahami bahwa Anda memperoleh metrik akurasi dengan mengarahkan semua lipatan kecuali satu lipatan pada satu lipatan dan membuat prediksi, lalu ulangi proses ini kali. Anda kemudian dapat menjalankan metrik akurasi pada semua instance Anda (presisi, recall,% diklasifikasikan dengan benar), yang seharusnya sama seperti jika …

3
Perlu algoritma untuk menghitung kemungkinan relatif bahwa data adalah sampel dari distribusi normal vs lognormal
Katakanlah Anda memiliki seperangkat nilai, dan Anda ingin tahu apakah lebih besar kemungkinannya diambil sampelnya dari distribusi Gaussian (normal) atau sampel dari distribusi lognormal? Tentu saja, idealnya Anda akan tahu sesuatu tentang populasi atau tentang sumber kesalahan eksperimental, sehingga akan memiliki informasi tambahan yang berguna untuk menjawab pertanyaan. Tapi di …

1
Menghitung ICC untuk regresi logistik efek-acak
Saya menjalankan model regresi logistik dalam bentuk: lmer(response~1+(1|site), family=binomial, REML = FALSE) Biasanya saya akan menghitung ICC dari varian intersep dan residual, tetapi ringkasan model tidak termasuk varians residual. Bagaimana saya menghitung ini?

4
Apakah properti kuantitatif populasi merupakan "parameter"?
Saya relatif akrab dengan perbedaan antara istilah statistik dan parameter. Saya melihat statistik sebagai nilai yang diperoleh dari menerapkan fungsi ke data sampel. Namun, sebagian besar contoh parameter terkait dengan mendefinisikan distribusi parametrik. Contoh umum adalah mean dan standar deviasi untuk parameterise distribusi normal atau koefisien dan varians kesalahan untuk …

Dengan menggunakan situs kami, Anda mengakui telah membaca dan memahami Kebijakan Cookie dan Kebijakan Privasi kami.
Licensed under cc by-sa 3.0 with attribution required.