Statistik dan Big Data

Terkunci . Pertanyaan ini dan jawabannya dikunci karena pertanyaannya di luar topik tetapi memiliki signifikansi historis. Saat ini tidak menerima jawaban atau interaksi baru. Fungsi Aku akrab dengan menyertakan skala dari basis R, rescale dari ARM. Mungkin cara terbaik adalah menggunakan beberapa varian berlaku, menentukan satu atau lebih variabel untuk …

9 r  standardization  centering 

Saya ingin melakukan analisis multivariat tingkat individu pada tingkat kecil agregasi geografis (distrik pengumpulan sensus Australia). Jelas, sensus tidak tersedia pada tingkat agregasi kecil ini untuk alasan privasi jadi saya sedang menyelidiki alternatif lain. Hampir semua variabel yang menarik bersifat kategorikal. Saya memiliki dua set data yang saya miliki: Sampel …

9 distributions  sampling  simulation  spatial  census 

Saya menjalankan temuan ANOVA misalnya interaksi antara jenis kelamin dan kelas daripada yang saya ingin tahu dalam apa nilai anak laki-laki dan perempuan berbeda, tetapi dalam banyak kasus saya menemukan (disesuaikan) nilai-p 0 dan 1. Bagaimana / mengapa ini mungkin? Sepertinya tidak benar ... as.factor(gender) 1 16 16.2 2.6377 0.104396 …

9 r 

Pertanyaan ini mungkin terdengar bodoh, tetapi ... apakah benar bahwa efek acak hanya dapat berlaku untuk variabel kategori (seperti id individu, id populasi, ...), misalkan katakanlah adalah variabel kategori:xsayaxix_i ysayayiy_i ~βxsayaβxi\beta_{x_i} βxsayaβxi\beta_{x_i} ~No r m ( μ , δ2)Norm(μ,δ2)Norm(\mu, \delta^2) tetapi dari prinsipnya efek acak tidak dapat berlaku untuk variabel …

9 mixed-model  categorical-data  continuous-data  random-effects-model 

Saya sedang menyelidiki apakah kondisi hadiah yang berbeda dapat mempengaruhi kinerja tugas. Saya memiliki data dari studi kecil dengan dua kelompok, masing-masing dengan n = 20. Saya mengumpulkan data pada tugas yang melibatkan kinerja dalam 3 kondisi "hadiah" yang berbeda. Tugas tersebut melibatkan kinerja di masing-masing dari 3 kondisi dua …

9 anova  spss  repeated-measures  assumptions 

Saya seorang pemula dalam statistik dan saya memiliki beberapa kebingungan tentang asumsi independensi untuk tes statistik. Saya mencari di internet dan beberapa informasi mengatakan bahwa untuk uji-t, pengamatan dalam dua kelompok harus independen (yaitu, pengukuran dalam sampel 1 dan pengukuran dalam sampel 2 harus berbeda). Beberapa informasi lain mengatakan bahwa …

9 independence  assumptions 

Diberikan pengaturan eksperimental berikut: Banyak sampel diambil dari subjek dan setiap sampel diperlakukan dengan berbagai cara (termasuk perlakuan kontrol). Yang paling menarik adalah perbedaan antara kontrol dan masing-masing perlakuan. Saya dapat memikirkan dua model sederhana untuk data ini. Dengan sampel , pengobatan , pengobatan 0 menjadi kontrol, biarkan menjadi data, …

9 regression  anova  linear-model  ancova 

Mengikuti dari posting saya sebelumnya, sejauh yang saya bisa mengerti, jika saya memiliki tiga koefisien korelasi, saya harus mengujinya berpasangan untuk melihat apakah ada perbedaan yang signifikan di antara mereka. Ini berarti bahwa saya harus menggunakan transformasi Nelayan untuk menghitung skor z r dan kemudian nilai p z (untungnya kalkulator …

9 correlation 

Saya perlu membuat kesimpulan tentang parameter positif . Untuk mengakomodir kepositifan, saya memvariasikan ulang p = exp ( q ) . Menggunakan rutin MLE saya menghitung estimasi titik dan se untuk q . Properti invarian dari MLE secara langsung memberi saya estimasi titik untuk p , tapi saya tidak yakin …

9 maximum-likelihood  standard-error  delta-method 

Saya sedang melihat beberapa masalah regresi logistik. ("reguler" dan "bersyarat"). Idealnya, saya ingin memberi bobot pada masing-masing kasus masukan sehingga GLM akan lebih fokus pada memprediksi kasing yang lebih tinggi dengan benar dengan mengorbankan kemungkinan kesalahan klasifikasi pada kasing yang lebih rendah. Tentunya ini sudah dilakukan sebelumnya. Adakah yang bisa …

9 logistic 

Distribusi diskrit dengan fungsi massa p(x;k)=k(x+k)(x+k−1),x=1,2,…p(x;k)=k(x+k)(x+k−1),x=1,2,…p(x;k) = \frac{k}{(x+k)(x+k-1)},\quad x = 1,2,\ldots muncul di halaman 9 tulisan ini . Untuk ini adalah distribusi Yule-Simon dengan , tapi saya belum menemukan contoh lain.k=1k=1k=1ρ=1ρ=1\rho=1 Apakah itu mempunyai nama? Apakah itu muncul dalam konteks lain? Apakah ada proses stokastik sederhana yang mungkin menghasilkannya?

9 distributions 

Misalkan saya mengamati vektor variabel independen dan dan variabel dependen . Saya ingin mencocokkan model formulir: mana adalah beberapa fungsi bernilai positif yang dapat dua kali, adalah parameter penskalaan yang tidak diketahui, dan adalah variabel rata-rata, varians unit Gaussian variabel acak (diasumsikan independen dari dan ). Ini pada dasarnya adalah …

9 regression  hypothesis-testing  heteroscedasticity  generalized-least-squares 

Mari kita katakan bahwa kita mendefinisikan jarak, yang bukan metrik , antara N item. Berdasarkan jarak ini kami kemudian menggunakan pengelompokan hierarki Agglomerative . Bisakah kita menggunakan masing-masing algoritma yang dikenal (tautan tunggal / maksimum / rata-rata dll), untuk mendapatkan hasil yang bermakna? Atau dengan kata lain, apa masalah dengan …

9 clustering  multilevel-analysis  metric  hierarchical-clustering 

Pertanyaan ini membahas distribusi normal, tetapi saya bertanya-tanya apa yang diketahui tentang distribusi standar deviasi sampel ukuran n yang diambil dari distribusi sewenang-wenang. Secara khusus, apa standar deviasi dari standar deviasi? Untuk distribusi normal, sd dari sd adalah . Apakah ini kira-kira berlaku untuk distribusi sewenang-wenang sebagai ?σ2n√σ2n\sigma \over{\sqrt{2n}}n→∞n→∞n \rightarrow …

9 standard-deviation 

Saya baru mengenal ridge regression. Ketika saya menerapkan regresi linear ridge, saya mendapat hasil berikut: >myridge = lm.ridge(y ~ ma + sa + lka + cb + ltb , temp, lamda = seq(0,0.1,0.001)) > select(myridge) modified HKB estimator is 0.5010689 modified L-W estimator is 0.3718668 smallest value of GCV at …

9 ridge-regression