Statistik dan Big Data

Mengapa rata-rata nilai tertinggi dari 100 menarik dari distribusi normal berbeda dari persentil 98% dari distribusi normal? Tampaknya secara definisi mereka harus sama. Tapi... Kode dalam R: NSIM <- 10000 x <- rep(NA,NSIM) for (i in 1:NSIM) { x[i] <- max(rnorm(100)) } qnorm(.98) qnorm(.99) mean(x) median(x) hist(x) Saya membayangkan bahwa …

8 r  distributions  maximum 

Bisakah seseorang menjelaskan mengapa Richard McElreath mengatakan uji pasti Fisher jarang digunakan secara tepat dalam buku pengantar Bayesiannya yang sangat bagus ( Statistical Rethinking )? Untuk referensi, konteksnya adalah di bawah ini: Mengapa tes tidak cukup untuk penelitian inovatif? Prosedur klasik dari statistik pengantar cenderung tidak fleksibel dan rapuh. Dengan …

7 hypothesis-testing  bayesian  fishers-exact 

Ada beberapa versi algoritma Metropolis Hastings yang adaptif. Satu diimplementasikan dalam fungsi Metro_Hastingsdari Rpaket MHadaptive, lihat di sini . Referensi yang tercantum di sana, Spiegelhalter et al. (2002), sayangnya tidak mengandung deskripsi dari algoritma adaptif, sejauh yang saya bisa lihat. Namun, Metro_Hastingsalgoritma berkinerja sangat baik dalam pengambilan sampel dari distribusi …

7 r  mcmc  metropolis-hastings 

Ini adalah pos silang dari Math SE . Saya punya beberapa data (menjalankan waktu suatu algoritma) dan saya pikir itu mengikuti hukum kekuatan yr e g= kxSebuahyreg=kxSebuahy_\mathrm{reg} = k x^a Saya ingin menentukan dan . Apa yang telah saya lakukan sejauh ini adalah melakukan regresi linier (kuadrat terkecil) melalui dan …

7 regression  fitting  logarithm  power-law 

Saya memiliki daftar produk, termasuk variabel seperti nama produk (seperti yang tertera pada tanda terima) dan pedagang tempat produk itu dibeli. Saya memiliki banyak dari mereka secara manual diklasifikasikan ke dalam kelompok kategori tetap (misalnya minuman beralkohol, sayuran, daging, dll.). Data, seperti biasa, berisik. Dalam hal ini, terutama berisik karena …

7 machine-learning  classification 

Saya melakukan tes peringkat jumlah Wilcoxon untuk mengetahui apakah ada perbedaan dalam distribusi Variabel untuk dua kelompok. Hasil tes menunjukkan bahwa perbedaan itu memang ada.X1X1X_1 Saya, bagaimanapun, curiga bahwa ada variabel perancu X2X2X_2 , yang menyebabkan perbedaan ini. Bagaimana saya bisa mengontrol X2X2X_2 ? Skenario Contoh: Joe ingin memahami apakah …

7 nonparametric  wilcoxon-mann-whitney  confounding 

Di Skeptics.StackExchange , sebuah jawaban mengutip sebuah studi tentang hipersensitivitas elektro-magnetik: McCarty, Carrubba, Chesson, Frilot, Gonzalez-Toledo & Marino, Hipersensitivitas Elektromagnetik: Bukti untuk Sindrom Neurologis Novel Jurnal Internasional Neuroscience, 00, 1-7 2011, DOI: 10.3109 / 00207454.2011.608139 Saya meragukan beberapa statistik yang digunakan, dan akan sangat menghargai beberapa keahlian dalam memeriksa ulang …

7 statistical-significance  chi-squared 

Ketika berbicara tentang histogram, mengapa kita menyebut sumbu x sebagai "bin"?

6 terminology  histogram