Statistik dan Big Data

Saya mengerti bukti bahwa tapi saya tidak mengerti bagaimana membuktikan generalisasi untuk kombinasi linear yang sewenang-wenang.Var(aX+bY)=a2Var(X)+b2Var(Y)+2abCov(X,Y),Var(aX+bY)=a2Var(X)+b2Var(Y)+2abCov(X,Y),Var(aX+bY) = a^2Var(X) +b^2Var(Y) + 2abCov(X,Y), Biarkan menjadi skalar untuk sehingga kita memiliki vektor , dan menjadi vektor dari variabel acak berkorelasi. Kemudian Bagaimana kita membuktikan ini? Saya membayangkan ada bukti dalam notasi penjumlahan dan …

10 mathematical-statistics  variance 

Wikipedia memberikan definisi berikut: Penyensoran benar : titik data berada di atas nilai tertentu tetapi tidak diketahui seberapa banyak. Sensor kiri : titik data di bawah nilai tertentu tetapi tidak diketahui seberapa banyak. Dalam definisi ini, apa yang dimaksud dengan: "titik data" "nilai tertentu", dan "berapa banyak" Secara umum, Apa …

10 self-study  censoring 

Saya tahu ini akan memperburuk kesimpulan statistik, tetapi saya benar-benar hanya peduli dengan sedekat mungkin dengan model yang akurat. Saya memiliki variabel hasil dikotomis, dengan seperangkat besar prediktor dikotomis. Saya pikir saya ingin mencoba menggunakan LASSO untuk memilih variabel mana yang harus saya sertakan dalam model saya, kemudian memasukkan variabel-variabel …

10 model-selection  lasso  logit 

Sejauh yang saya tahu k-means memilih pusat awal secara acak. Karena mereka didasarkan pada keberuntungan murni, mereka dapat dipilih dengan sangat buruk. Algoritma K-means ++ mencoba untuk memecahkan masalah ini, dengan menyebarkan pusat awal secara merata. Apakah kedua algoritma menjamin hasil yang sama? Atau ada kemungkinan bahwa centroid awal yang …

10 k-means 

Tutup. Pertanyaan ini di luar topik . Saat ini tidak menerima jawaban. Ingin meningkatkan pertanyaan ini? Perbarui pertanyaan sehingga sesuai topik untuk Cross Validated. Ditutup 4 tahun yang lalu . Saya melatih model menggunakan caretpaket dalam R selama hampir 3 hari. Perhitungan berjalan secara paralel (beberapa proses). Sayangnya tidak ada …

10 r  machine-learning  svm  caret 

Bagaimana saya bisa mendapatkan efek acak dikumpulkan untuk lmer setelah beberapa kali imputasi? Saya menggunakan mouse untuk menghubungkan beberapa frame data. Dan lme4 untuk model campuran dengan intersep acak dan kemiringan acak. Pooling lmer baik-baik saja, kecuali bahwa itu tidak mengumpulkan efek acak. Saya telah mencari banyak solusi tanpa keberuntungan. …

10 r  lme4-nlme  multiple-imputation 

Saya memiliki beberapa deret waktu dalam VAR (1) dan, karena beberapa dari mereka tidak memiliki satuan ukuran yang sama, saya ingin memperkirakan RMSE dalam persentase. Saya tahu itu bisa dilakukan dalam beberapa cara (lihat di bawah) tetapi saya tidak tahu persis mana yang lebih cocok dengan masalah evaluasi perkiraan. Saya …

10 time-series  mse  rms 

Saya menggunakan ccfuntuk menemukan korelasi antara 2 seri waktu. Saya mendapatkan plot yang terlihat seperti itu: Perhatikan bahwa saya terutama tertarik pada korelasi untuk lag = 0. Pertanyaan: Apakah mengartikannya dengan benar bahwa ada korelasi silang untuk lag = 0, karena untuk lag ini korelasi silang berada di atas garis …

10 r  interpretation  cross-correlation 

Saya sedang mengerjakan tesis saya di mana saya memeriksa seberapa kuat emosi orang-orang terhadap berbagai peristiwa. Masalah saya adalah (1) saya memiliki pengalaman yang SANGAT kecil dengan statistik dan matematika, jadi saya agak bingung dengan semua metode yang berbeda dan akan sangat senang jika jawaban 'mudah' dapat diberikan (tanpa banyak …

10 time-series 

Saya memiliki data dengan variabel kategori dan variabel kontinu, tetapi adalah kebutuhan untuk menemukan nilai informasi dalam analisis data penjelasan. Berikan saja alasan mengapa kami menghitung nilai informasi untuk setiap variabel pada awal analisis data dan apa yang akan menjadi titik cutoff dari INFORMASI NILAI untuk mengurus analisis

10 data-visualization 

Dari video ini oleh Andrew Ng sekitar pukul 5:00 Bagaimana dan diturunkan? Bahkan, apa artinya ? didapat dengan membandingkan ke y, tidak ada perbandingan seperti itu untuk output dari lapisan tersembunyi, kan?δ3δ3\delta_3δ2δ2\delta_2δ3δ3\delta_3δ4δ4\delta_4

10 machine-learning  neural-networks  backpropagation 

Gambar di bawah ini (Gambar 1 dari hal. 646 tulisan ini ) membandingkan nilai yang diamati dengan nilai yang diharapkan di bawah distribusi Poisson. Kemudian menjalankan uji chi-squared untuk melihat apakah nilai yang diamati berbeda dari nilai yang diharapkan di bawah distribusi Poisson. Dengan menggunakan R, bagaimana mungkin untuk menghasilkan …

10 r  distributions  chi-squared  poisson-distribution 

Saya memiliki delapan variabel independen dan satu dependen. Saya telah menjalankan matriks korelasi, dan 5 di antaranya memiliki korelasi rendah dengan DV. Saya kemudian menjalankan beberapa regresi bertahap untuk melihat apakah ada / semua IVs dapat memprediksi DV. Regresi menunjukkan bahwa hanya dua IV yang dapat memprediksi DV (hanya dapat …

10 regression  correlation  statistical-significance  feature-selection  predictor 

Saya hanya mencoba untuk mengimplementasikan algoritma Baum-Welch yang diskalakan dan saya telah mengalami masalah di mana variabel terbelakang saya, setelah penskalaan, berada di atas nilai 1. Apakah ini normal? Bagaimanapun, probabilitas tidak boleh lebih dari 1. Saya menggunakan faktor skala yang saya dapatkan dari variabel forward: ct=1/∑s∈Sαt(s)ct=1/∑s∈Sαt(s) c_t = 1 …

10 machine-learning  hidden-markov-model  beta-distribution 

Saya tidak mengerti mengapa mengubah jaringan Bayesian menjadi grafik faktor baik untuk inferensi Bayesian? Pertanyaan saya adalah: Apa manfaat menggunakan grafik faktor dalam penalaran Bayesian? Apa yang akan terjadi jika kita tidak menggunakannya? Setiap contoh nyata akan dihargai!

10 bayesian  graphical-model  bayesian-network