Statistik dan Big Data

Jadi saya bekerja dengan model regresi logistik di R. Meskipun saya masih baru dalam statistik, saya merasa seperti saya mendapatkan sedikit pemahaman untuk model regresi sekarang, tetapi masih ada sesuatu yang mengganggu saya: Melihat gambar yang ditautkan, Anda melihat ringkasan R yang dicetak untuk contoh model yang saya buat. Model …

9 r  regression  logistic  p-value  interpretation 

Saya mengeksplorasi sifat psikometrik dari ukuran laporan diri 10 item. Saya memiliki sekitar 400 kasus dalam dua sampel independen. Item selesai pada skala Likert 4 poin. EFA jelas mendukung solusi satu faktor (misalnya, nilai eigen pertama di atas 6, semua lainnya di bawah 1) dan alpha Cronbach baik (misalnya, 0,90). …

9 factor-analysis  survey  psychometrics  psychology  confirmatory-factor 

karena saya melangkah ke peramalan dengan model ARIMA, saya mencoba memahami bagaimana saya dapat meningkatkan ramalan berdasarkan ARIMA yang sesuai dengan musiman dan pergeseran. Data saya adalah seri waktu berikut (lebih dari 3 tahun, dengan tren yang jelas ke atas dan musim yang terlihat, yang tampaknya tidak didukung oleh autokorelasi …

9 r  time-series  forecasting  arima  seasonality 

Saya sedang mengerjakan beberapa perangkat lunak yang harus menentukan lokasi dunia nyata (kamera kecepatan) dari beberapa laporan berbasis GPS . Seorang pengguna akan mengemudi saat melaporkan lokasi, sehingga laporannya sangat tidak akurat. Untuk mengatasi masalah itu saya harus mengelompokkan laporan tentang lokasi yang sama dan menghitung rata-rata. Pertanyaan saya adalah …

9 k-means  expectation-maximization  point-estimation 

Saya mencari estimasi kuat dari mean yang memiliki properti spesifik. Saya memiliki serangkaian elemen yang ingin saya hitung statistik ini. Kemudian, saya menambahkan elemen baru satu per satu, dan untuk setiap elemen tambahan saya ingin menghitung ulang statistik (juga dikenal sebagai algoritma online). Saya ingin kalkulasi pembaruan ini menjadi cepat, …

9 estimation  mean  robust 

Apa saja dari beberapa uji statistik yang terkenal untuk mengukur good of of fit dari variabel-variabel acak yang diamati pada suatu distribusi poisson? Saya tahu tes Kolmogorov-Smirnov adalah salah satunya, adakah yang lain di luar sana?

9 probability  poisson-distribution  goodness-of-fit 

Saya menerapkan berbagai algoritme untuk memperkirakan jumlah sampah terbaik yang digunakan untuk histogram. Sebagian besar yang saya laksanakan dijelaskan pada halaman "Histogram" Wikipedia di bagian " Jumlah sampah dan lebar " *. Saya terjebak pada masalah dengan rumus Doane: 1 + log(n) + log(1 + kurtosis(data) * sqrt(n / 6.)) …

9 histogram  binning 

Saya menggunakan Dynamic Time Warping untuk mencocokkan kurva "kueri" dan "templat" dan sejauh ini berhasil, tetapi saya punya beberapa pertanyaan mendasar: Saya menilai "kecocokan" dengan menilai apakah hasil DTW kurang dari beberapa nilai ambang batas yang saya buat secara heuristik. Apakah ini pendekatan umum untuk menentukan "kecocokan" menggunakan DTW? Jika …

9 time-series  normalization  functional-data-analysis 

Apakah stan (khususnya, rstan) memiliki fasilitas bawaan untuk menghasilkan distribusi posterior prediktif? Tidak sulit untuk menghasilkan distribusi dari stan fit, tetapi saya lebih suka tidak menemukan kembali roda.

9 bayesian  posterior  stan 

(Saya tidak tahu apa yang harus ditandai dengan ini karena saya bukan ahli statistik dan saya tidak tahu bidang apa ini. Jangan ragu untuk menambahkan tag yang lebih cocok.) Saya bekerja untuk perusahaan yang memproduksi perangkat lunak analisis data, dan kami membutuhkan set data yang layak untuk menguji dan mendemonstrasikan …

9 data-cleaning 

Jika saya menentukan koordinat dan mana( X 2 , Y 2 )(X1,Y1)(X1,Y1)(X_{1},Y_{1})(X2,Y2)(X2,Y2)(X_{2},Y_{2}) X1,X2∼Unif(0,30) and Y1,Y2∼Unif(0,40).X1,X2∼Unif(0,30) and Y1,Y2∼Unif(0,40).X_{1},X_{2} \sim \text{Unif}(0,30)\text{ and }Y_{1},Y_{2} \sim \text{Unif}(0,40). Bagaimana saya bisa menemukan nilai jarak yang diharapkan dari mereka? Saya berpikir, karena jarak dihitung oleh akan nilai yang diharapkan jadilah ?(1/30+1/30)2+(1/40+1/40)2(X1−X2)2+(Y1−Y2)2−−−−−−−−−−−−−−−−−−−√)(X1−X2)2+(Y1−Y2)2)\sqrt{(X_{1}-X_{2})^{2} + (Y_{1}-Y_{2})^{2}})(1/30+1/30)2+(1/40+1/40)2(1/30+1/30)2+(1/40+1/40)2(1/30 + 1/30)^2 + …

9 expected-value  uniform  distance 

Saya memiliki model regresi yang terlihat seperti ini:Y= β0+ β1X1+ β2X2+ β3X3+ β12X1X2+ β13X1X3+ β123X1X2X3Y=β0+β1X1+β2X2+β3X3+β12X1X2+β13X1X3+β123X1X2X3Y = \beta_0+\beta_1X_1 + \beta_2X_2 + \beta_3X_3 +\beta_{12}X_1X_2+\beta_{13}X_1X_3+\beta_{123}X_1X_2X_3 ... atau dalam notasi R: y ~ x1 + x2 + x3 + x1:x2 + x1:x3 + x1:x2:x3 Katakanlah dan adalah variabel kategori dan adalah numerik. Masalahnya adalah …

9 r  contrasts 

Adakah yang tahu metode yang baik untuk menentukan apakah pengelompokan menggunakan kmeans bahkan sesuai? Artinya, bagaimana jika sampel Anda sebenarnya homogen? Saya tahu sesuatu seperti model campuran (melalui mclust di R) akan memberikan statistik yang cocok untuk kasus klaster 1: k, tetapi sepertinya semua teknik untuk mengevaluasi kman memerlukan setidaknya …

9 r  clustering  k-means 

Adakah yang bisa menyarankan bagaimana saya dapat menghitung fungsi momen menghasilkan produk dalam dari dua vektor Gaussian acak, masing-masing didistribusikan sebagai , independen satu sama lain? Apakah ada beberapa hasil standar yang tersedia untuk ini? Pointer apa pun sangat dihargai.N(0,σ2)N(0,σ2)\mathcal N(0,\sigma^2)

9 normal-distribution  mathematical-statistics  multivariate-analysis  moments  mgf 

Saya memiliki beberapa data yang saya tidak bisa berasumsi diambil dari distribusi normal, dan saya ingin melakukan tes kesetaraan antar kelompok. Untuk data normal, ada teknik seperti TOST (dua uji satu sisi). Apakah ada yang analog dengan TOST untuk data yang tidak normal?

9 hypothesis-testing  equivalence  tost