Statistik dan Big Data

SPSS menawarkan beberapa metode ekstraksi faktor: Komponen utama (yang sama sekali bukan analisis faktor) Kuadrat terkecil tertimbang Kuadrat terkecil umum Kemungkinan Maksimum Sumbu Utama Anjak piutang Anjak gambar Mengabaikan metode pertama, yang bukan analisis faktor (tetapi analisis komponen utama, PCA), yang mana dari metode ini yang "terbaik"? Apa keuntungan relatif …

29 spss  pca  factor-analysis 

Saya pernah berurusan dengan classifier Naif Bayes sebelumnya. Saya telah membaca tentang Multinomial Naif Bayes belakangan ini. Juga Probabilitas Posterior = (Sebelum * Kemungkinan) / (Bukti) . Satu-satunya perbedaan utama (saat memprogram pengklasifikasi ini) yang saya temukan antara Naive Bayes & Multinomial Naive Bayes adalah bahwa Multinomial Naive Bayes menghitung …

29 bayesian  classification  text-mining  naive-bayes 

Saya hanya mencoba untuk mereplikasi klaim yang dibuat dalam makalah berikut, Finding Bicerust Correlated dari Gene Expression Data , yaitu: Proposisi 4. Jika . maka kita memiliki:XIJ=RICTJXIJ=RICJTX_{IJ}=R_{I}C^{T}_{J} saya. Jika adalah bicluster sempurna dengan model aditif, maka adalah bicluster sempurna dengan korelasi pada kolom; ii. Jika adalah sempurna dengan model aditif, …

29 correlation  multivariate-analysis  svd 

Kriteria Informasi Akaike (AIC) dan statistik-c (area di bawah kurva ROC) adalah dua ukuran model yang cocok untuk regresi logistik. Saya mengalami kesulitan menjelaskan apa yang sedang terjadi ketika hasil dari kedua langkah tersebut tidak konsisten. Saya kira mereka mengukur aspek fit model yang sedikit berbeda, tetapi apa saja aspek …

29 logistic  roc  aic  auc 

Probabilitas terapan adalah cabang penting dalam probabilitas, termasuk probabilitas komputasi. Karena statistik menggunakan teori probabilitas untuk membangun model untuk menangani data, seperti pemahaman saya, saya bertanya-tanya apa perbedaan penting antara model statistik dan model probabilitas? Model probabilitas tidak memerlukan data nyata? Terima kasih.

29 probability  mathematical-statistics 

Saya telah menghasilkan vektor yang memiliki distribusi Poisson, sebagai berikut: x = rpois(1000,10) Jika saya membuat histogram menggunakan hist(x), distribusi terlihat seperti distribusi normal berbentuk lonceng yang sudah dikenal. Namun, tes Kolmogorov-Smirnoff menggunakan ks.test(x, 'pnorm',10,3)mengatakan distribusi secara signifikan berbeda dengan distribusi normal, karena pnilai yang sangat kecil . Jadi pertanyaan …

29 distributions  histogram  normal-distribution  poisson-distribution 

Saya ingin menguji perbedaan respons dua variabel terhadap satu prediktor. Berikut adalah contoh minimal yang dapat direproduksi. library(nlme) ## gls is used in the application; lm would suffice for this example m.set <- gls(Sepal.Length ~ Petal.Width, data = iris, subset = Species == "setosa") m.vir <- gls(Sepal.Length ~ Petal.Width, data …

29 r  data-visualization  multivariate-analysis  hypothesis-testing 

Saya agak baru menggunakan regresi logistik, dan sedikit bingung oleh perbedaan antara interpretasi saya terhadap nilai-nilai berikut yang saya pikir akan sama: nilai beta eksponensial prediksi probabilitas hasil menggunakan nilai beta. Berikut ini adalah versi sederhana dari model yang saya gunakan, di mana kekurangan gizi dan asuransi keduanya biner, dan …

29 regression  logistic  interpretation  prediction  odds-ratio 

Kami membutuhkan sistem peringatan dini. Saya berurusan dengan server yang diketahui memiliki masalah kinerja di bawah beban. Kesalahan dicatat dalam database bersama dengan stempel waktu. Ada beberapa langkah intervensi manual yang dapat diambil untuk mengurangi beban server, tetapi hanya jika seseorang mengetahui masalah ini ... Dengan serangkaian waktu terjadinya kesalahan, …

29 time-series  real-time 

Apakah ada cara dalam R (fungsi bawaan) untuk menghitung matriks transisi untuk Rantai Markov dari serangkaian pengamatan? Misalnya, mengambil kumpulan data seperti berikut dan menghitung matriks transisi orde pertama? dat<-data.frame(replicate(20,sample(c("A", "B", "C","D"), size = 100, replace=TRUE)))

29 r  markov-process 

Sepertinya saya bahwa hanya dua paket R yang dapat melakukan Alokasi Dirichlet Latent : Salah satunya lda, ditulis oleh Jonathan Chang; dan yang lainnya topicmodelsditulis oleh Bettina Grün dan Kurt Hornik. Apa perbedaan antara kedua paket ini, dalam hal kinerja, detail implementasi, dan ekstensibilitas?

29 r  bayesian  text-mining  topic-models  latent-dirichlet-alloc 

Saya cukup baru dalam bidang statistik dan saya membutuhkan bantuan Anda. Saya punya sampel kecil, sebagai berikut: H4U 0.269 0.357 0.2 0.221 0.275 0.277 0.253 0.127 0.246 Saya menjalankan tes Shapiro-Wilk menggunakan R: shapiro.test(precisionH4U$H4U) dan saya mendapat hasil sebagai berikut: W = 0.9502, p-value = 0.6921 Sekarang, jika saya menganggap …

29 r  distributions  interpretation  goodness-of-fit  normality-assumption 

Saya ingin mempelajari cara kerja Gibbs Sampling dan saya mencari dasar yang bagus untuk makalah menengah. Saya memiliki latar belakang ilmu komputer dan pengetahuan statistik dasar. Adakah yang sudah membaca materi bagus? dimana kamu belajar Terima kasih

29 references  gibbs 

Saya menggunakan fungsi auto.arima () dalam paket perkiraan agar sesuai dengan model ARMAX dengan beragam kovariat. Namun, saya sering memiliki sejumlah besar variabel untuk dipilih dan biasanya berakhir dengan model akhir yang berfungsi dengan subset dari mereka. Saya tidak suka teknik ad-hoc untuk pemilihan variabel karena saya manusia dan cenderung …

29 r  time-series  lasso  regularization  elastic-net 

Saya diajarkan untuk hanya menerapkan Fisher's Exact Test di tabel kontingensi yang 2x2. Pertanyaan: Apakah Fisher sendiri pernah membayangkan tes ini untuk digunakan dalam tabel yang lebih besar dari 2x2 (Saya tahu kisahnya merancang tes sambil mencoba menebak apakah seorang wanita tua dapat mengetahui apakah susu ditambahkan ke teh atau …

29 spss  stata  contingency-tables  fishers-exact