Statistik dan Big Data

Saya punya beberapa data yang terlihat dari merencanakan grafik residu vs waktu hampir normal tetapi saya ingin memastikan. Bagaimana saya bisa menguji normalitas residu kesalahan?

20 hypothesis-testing  normal-distribution  assumptions 

Misalkan saya punya 20 tikus. Saya memasangkan tikus dalam beberapa cara, sehingga saya mendapatkan 10 pasang. Untuk tujuan pertanyaan ini, itu bisa menjadi pasangan acak, ATAU itu bisa menjadi pasangan yang masuk akal, seperti mencoba untuk memasangkan tikus dari sampah yang sama, dari jenis kelamin yang sama, dengan berat yang …

20 t-test  paired-data 

Saya menggunakan 1/4transformasi kekuatan root keempat ( ) pada variabel respons saya, sebagai hasil dari heteroskedastisitas. Tapi sekarang saya tidak yakin bagaimana menafsirkan koefisien regresi saya. Saya berasumsi bahwa saya perlu membawa koefisien ke kekuatan keempat ketika saya melakukan transformasi balik (lihat di bawah hasil regresi). Semua variabel dalam satuan …

20 regression  data-transformation 

Data untuk beberapa jenis variabel cenderung tidak normal ketika diukur dalam populasi tertentu (misalnya tingkat depresi pada populasi orang dengan Gangguan Depresif Utama). Mengingat bahwa Pearson mengasumsikan normal, seberapa kuat statistik uji dalam kondisi non-normal? Saya memiliki sejumlah variabel yang saya ingin koefisien korelasi, tetapi kemiringan Z untuk beberapa variabel …

20 correlation 

Saya memiliki data pengembalian harian 10 tahun untuk 28 mata uang yang berbeda. Saya ingin mengekstraksi komponen utama pertama, tetapi alih-alih mengoperasikan PCA selama 10 tahun penuh, saya ingin membuka jendela 2 tahun, karena perilaku mata uang berkembang dan saya ingin merefleksikan ini. Namun saya memiliki masalah besar, yaitu bahwa …

20 r  pca 

Saya mengalami masalah dalam menghasilkan serangkaian seri waktu berwarna stasioner, mengingat matriks kovariansnya (densitas spektral daya (PSD)) dan densitas spektral cross-power (CSD)). Saya tahu bahwa, mengingat dua seri waktu yI(t)ysaya(t)y_{I}(t) dan yJ(t)yJ(t)y_{J}(t) , saya dapat memperkirakan kepadatan spektral daya (PSD) dan kepadatan spektral silang (CSD) menggunakan banyak rutinitas yang tersedia …

20 time-series  sampling  algorithms  simulation  covariance 

Saya punya beberapa pertanyaan singkat tentang PCA: Apakah PCA berasumsi bahwa dataset adalah Gaussian? Apa yang terjadi ketika saya menerapkan PCA ke data non-linear yang inheren? Diberikan dataset, prosesnya adalah untuk menormalkan rata-rata, mengatur varians ke 1, mengambil SVD, mengurangi peringkat, dan akhirnya memetakan dataset ke dalam ruang pengurangan peringkat …

20 pca  svd 

Saya memiliki beberapa data dalam [0,1] yang ingin saya analisis dengan regresi beta. Tentu saja sesuatu perlu dilakukan untuk mengakomodasi nilai 0,1. Saya tidak suka memodifikasi data agar sesuai dengan model. juga saya tidak percaya bahwa inflasi nol dan 1 adalah ide yang baik karena saya percaya dalam hal ini …

20 regression  generalized-linear-model  beta-distribution  zero-inflation  beta-regression 

Saya telah belajar tentang statistik Bayesian, dan saya sering membaca dalam artikel "Kami mengadopsi pendekatan Bayesian" atau yang serupa. Saya juga memperhatikan, lebih jarang: "Kami mengadopsi pendekatan Bayesian sepenuhnya " (Penekanan saya). Apakah ada perbedaan antara pendekatan ini dalam arti praktis atau teoritis? FWIW, saya menggunakan paket MCMCglmmdalam R dalam …

20 bayesian 

Saya ingin memahami cara membuat interval prediksi untuk estimasi regresi logistik. Saya disarankan untuk mengikuti prosedur dalam Pemodelan Data Biner Collett , 2nd Ed hal.98-99. Setelah menerapkan prosedur ini dan membandingkannya dengan R predict.glm, saya benar-benar berpikir buku ini menunjukkan prosedur untuk menghitung interval kepercayaan , bukan interval prediksi. Implementasi …

20 r  regression  confidence-interval  logistic  prediction-interval 

Saya telah membangun indeks modal sosial menggunakan teknik PCA. Indeks ini terdiri dari nilai-nilai positif dan negatif. Saya ingin mengubah / mengonversi indeks ini ke skala 0-100 agar mudah ditafsirkan. Tolong sarankan saya cara termudah untuk melakukannya.

20 data-transformation  scales 

Diberi model hierarkis , saya ingin proses dua tahap agar sesuai dengan model. Pertama, perbaiki beberapa hiperparameter , dan kemudian lakukan inferensi Bayesian pada seluruh parameter \ phi . Untuk memperbaiki hyperparameters saya mempertimbangkan dua opsi.p ( x | ϕ , θ )p(x|ϕ,θ)p(x|\phi,\theta)θθ\thetaϕϕ\phi Gunakan Empirical Bayes (EB) dan maksimalkan kemungkinan …

20 cross-validation  references  empirical-bayes 

Salah satu metode naif untuk mendekati distribusi normal adalah dengan menambahkan bersama-sama mungkin variabel acak IID yang terdistribusi secara seragam pada , kemudian masuk kembali dan skala, bergantung pada Teorema Batas Pusat. ( Catatan : Ada metode yang lebih akurat seperti transformasi Box-Muller .) Jumlah variabel acak IID dikenal sebagai …

20 normal-distribution  central-limit-theorem  moments  approximation 

Saya memiliki dua populasi (pria dan wanita), masing-masing berisi sampel. Untuk setiap sampel, saya memiliki dua properti A & B (rata-rata nilai tahun pertama, dan skor SAT). Saya telah menggunakan uji-t secara terpisah untuk A & B: keduanya menemukan perbedaan yang signifikan antara kedua kelompok; A dengan dan B dengan …

20 statistical-significance  t-test  p-value  effect-size 

Dalam pengaturan di mana seseorang mengamati didistribusikan dari distribusi dengan kepadatan , saya ingin tahu apakah ada penduga yang tidak bias (berdasarkan ) dari jarak Hellinger ke distribusi lain dengan kepadatan , yaitu X1,…,XnX1,…,XnX_1,\ldots,X_nfffXiXiX_if0f0f_0H(f,f0)={1−∫Xf(x)f0(x)−−−−−−−−√dx}1/2.H(f,f0)={1−∫Xf(x)f0(x)dx}1/2. \mathfrak{H}(f,f_0) = \left\{ 1 - \int_\mathcal{X} \sqrt{f(x)f_0(x)} \text{d}x \right\}^{1/2}\,.

20 pdf  unbiased-estimator  distance-functions  functional-data-analysis  hellinger