Statistik dan Big Data

Saya menduga bahwa sebagian besar pengguna alat statistik adalah pengguna tambahan (orang yang memiliki sedikit atau tidak ada pelatihan formal dalam statistik). Sangat menggoda bagi para peneliti dan profesional lain untuk menerapkan metode statistik pada data mereka hanya karena mereka telah melihatnya "dilakukan sebelumnya" dalam makalah peer-review, literatur abu-abu, web …

12 dataset  methodology 

Saya harus mengurangi jumlah variabel untuk melakukan analisis cluster. Variabel saya sangat berkorelasi, jadi saya berpikir untuk melakukan Analisis Faktor PCA (analisis komponen utama). Namun, jika saya menggunakan skor yang dihasilkan, cluster saya tidak terlalu benar (dibandingkan dengan klasifikasi sebelumnya dalam literatur). Pertanyaan: Dapatkah saya menggunakan matriks rotasi untuk memilih …

12 clustering  pca  feature-selection  factor-analysis 

Terkunci . Pertanyaan ini dan jawabannya dikunci karena pertanyaannya di luar topik tetapi memiliki signifikansi historis. Saat ini tidak menerima jawaban atau interaksi baru. Saya memiliki dataset ascii yang terdiri dari tiga kolom, tetapi hanya dua yang terakhir adalah data aktual. Sekarang saya ingin membuat dotchart data dengan menggunakan read.csv(file …

12 r 

Bagaimana kita mendefinisikan estimator untuk data yang berasal dari distribusi binomial? Untuk bernoulli saya bisa memikirkan estimator yang mengestimasi parameter p, tetapi untuk binomial saya tidak bisa melihat parameter apa yang diestimasi ketika kita memiliki n karakterisasi distribusi? Memperbarui: Yang saya maksud dengan estimator adalah fungsi dari data yang diamati. …

12 estimation  binomial 

Saya bertanya-tanya apa perbedaan antara uji-t dan ANOVA dalam regresi linier? Apakah uji-t untuk menguji apakah salah satu lereng dan intersep memiliki nilai nol, sedangkan ANOVA untuk menguji apakah semua lereng memiliki nilai nol? Apakah ini satu-satunya perbedaan di antara mereka? Dalam regresi linier sederhana yaitu di mana hanya ada …

12 regression  anova  t-test 

Saya memiliki deret waktu biner dengan 1 saat mobil tidak bergerak, dan 0 saat mobil bergerak. Saya ingin membuat perkiraan untuk horizon waktu hingga 36 jam ke depan dan untuk setiap jam. Pendekatan pertama saya adalah menggunakan Naive Bayes menggunakan input berikut: t-24 (musiman harian), t-48 (musiman mingguan), jam dalam …

12 r  time-series  forecasting  binary-data 

Apa yang akan menjadi cara umum untuk memperkirakan matriks transisi MC mengingat jangka waktu? Apakah ada fungsi R untuk melakukan itu?

12 markov-process 

Bootstrap, dalam bentuk standarnya, dapat digunakan untuk menghitung interval kepercayaan dari perkiraan statistik asalkan pengamatan itu benar. I. Visser et al. di " Interval Keyakinan untuk Parameter Model Hidden Markov ," menggunakan bootstrap parametrik untuk menghitung CI untuk parameter HMM. Namun, ketika kami memasukkan HMM pada urutan pengamatan, kami telah …

12 confidence-interval  bootstrap  hidden-markov-model 

Saya mencoba menjalankan tindakan berulang Anova di R diikuti oleh beberapa kontras khusus pada dataset itu. Saya pikir pendekatan yang benar akan digunakan Anova()dari paket mobil. Mari kita ilustrasikan pertanyaan saya dengan contoh yang diambil dari ?Anovamenggunakan OBrienKaiserdata (Catatan: Saya menghilangkan faktor gender dari contoh): Kami memiliki desain dengan satu …

12 r  anova  repeated-measures  contrasts  sums-of-squares 

Tutup. Pertanyaan ini di luar topik . Saat ini tidak menerima jawaban. Ingin meningkatkan pertanyaan ini? Perbarui pertanyaan sehingga sesuai topik untuk Cross Validated. Ditutup 4 tahun yang lalu . Saya ingin memplot empat barplot pada satu grafik di R. Saya telah menggunakan kode berikut. Di sini, bagaimana menjaga legenda …

12 r  data-visualization  barplot 

Saya memiliki sampel tertimbang, yang ingin saya hitung kuantil. 1 Idealnya, jika bobotnya sama (baik = 1 atau tidak), hasilnya akan konsisten dengan bobot scipy.stats.scoreatpercentile()R dan quantile(...,type=7). Salah satu pendekatan sederhana adalah "memperbanyak" sampel menggunakan bobot yang diberikan. Itu secara efektif memberikan "flat" ecdf lokal di bidang berat> 1, yang …

12 algorithms  quantiles  weighted-sampling 

Dalam analisis komponen utama, komponen utama adalah arah orthogonal dengan varians maksimum. Dengan kata lain, komponen utama pertama dipilih untuk menjadi arah varians maksimum, komponen utama kedua dipilih untuk menjadi arah ortogonal ke yang pertama dengan varian maksimum, dan seterusnya.kkkkkkk Apakah ada interpretasi yang serupa untuk Analisis Faktor? Sebagai contoh, …

12 pca  factor-analysis 

Saya ingin menggunakan BIC untuk pemilihan model HMM: BIC = -2*logLike + num_of_params * log(num_of_data) Jadi bagaimana cara menghitung jumlah parameter dalam model HMM. Pertimbangkan HMM 2-negara sederhana, di mana kami memiliki data berikut: data = [1 2 1 1 2 2 2 1 2 3 3 2 3 2 …

12 machine-learning  model-comparison  bic  hidden-markov-model 

Saya sangat tertarik tentang potensi analisis statistik untuk simulasi / perkiraan / estimasi fungsi, dll. Namun, saya tidak tahu banyak tentang itu dan pengetahuan matematika saya masih sangat terbatas - saya seorang mahasiswa sarjana junior di bidang rekayasa perangkat lunak. Saya mencari buku yang akan membantu saya memulai hal-hal tertentu …

12 r  regression  machine-learning  references  simulation 

Adakah yang tahu arti efek parsial rata-rata? Apa sebenarnya itu dan bagaimana saya bisa menghitungnya? Berikut ini adalah referensi yang mungkin bisa membantu.

12 regression  count-data