Statistik dan Big Data

Saya telah menjelajahi banyak situs bantuan dan masih bingung tentang cara menentukan istilah bersarang yang lebih rumit dalam model campuran juga. Saya juga bingung karena penggunaan :dan /dan |dalam menentukan interaksi dan bersarang dengan faktor acak yang digunakan lmer()dalam lme4paket di R. Untuk keperluan pertanyaan ini, anggap saya telah secara …

26 r  mixed-model  lme4-nlme 

Pemahaman saya adalah bahwa dengan validasi silang dan pemilihan model kami mencoba mengatasi dua hal: P1 . Perkirakan perkiraan kerugian pada populasi saat pelatihan dengan sampel kami P2 . Ukur dan laporkan ketidakpastian estimasi kami ini (varians, interval kepercayaan, bias, dll.) Praktik standar tampaknya melakukan validasi silang berulang, karena ini …

26 estimation  cross-validation  references 

Saya sangat bingung tentang apakah sah untuk memasukkan variabel dependen tertinggal ke dalam model regresi. Pada dasarnya saya pikir jika model ini berfokus pada hubungan antara perubahan Y dan variabel independen lainnya, maka menambahkan variabel dependen tertinggal di sisi kanan dapat menjamin bahwa koefisien sebelum IV lain independen dari nilai …

26 regression  lags  misspecification 

Ini mirip dengan pertanyaan metode pengambilan sampel Caret , meskipun itu benar-benar tidak pernah menjawab bagian dari pertanyaan ini dengan cara yang disepakati. fungsi kereta caret menawarkan cvdan repeatedcv. Apa perbedaan dalam mengatakan melakukan: MyTrainControl=trainControl( method = "cv", number=5, repeats=5 ) vs. MyTrainControl=trainControl( method = "repeatedcv", number=5, repeats=5 ) Saya …

26 r  machine-learning  caret 

Apa saja prasyarat yang harus dipenuhi untuk perbandingan model AIC agar bekerja? Saya baru saja menjawab pertanyaan ini ketika melakukan perbandingan seperti ini: > uu0 = lm(log(usili) ~ rok) > uu1 = lm(usili ~ rok) > AIC(uu0) [1] 3192.14 > AIC(uu1) [1] 14277.29 Dengan cara ini saya membenarkan logtransformasi variabel …

26 regression  model-selection  aic  model-comparison  nested-models 

Saya memiliki model logit yang muncul dengan angka antara 0 dan 1 untuk banyak kasus, tetapi bagaimana kita bisa menginterpretasikan ini? Mari kita mengambil kasing dengan logit 0,20 Bisakah kita menyatakan bahwa ada kemungkinan 20% bahwa suatu kasus milik kelompok B vs kelompok A? Apakah itu cara yang benar untuk …

26 regression  logistic  logit 

Bagaimana PCA, LDA, CCA, dan PLS terkait? Mereka semua tampak "spektral" dan aljabar linier dan sangat dipahami (katakanlah 50+ tahun teori dibangun di sekitar mereka). Mereka digunakan untuk hal-hal yang sangat berbeda (PCA untuk pengurangan dimensi, LDA untuk klasifikasi, PLS untuk regresi) tetapi masih mereka merasa sangat erat terkait.

26 pca  discriminant-analysis  partial-least-squares  canonical-correlation 

Beberapa teknik pemodelan prediktif lebih dirancang untuk menangani prediktor berkelanjutan, sementara yang lain lebih baik untuk menangani variabel kategorikal atau diskrit. Tentu saja ada teknik untuk mengubah satu jenis ke yang lain (diskritisasi, variabel dummy, dll.). Namun, apakah ada teknik pemodelan prediktif yang dirancang untuk menangani kedua jenis input pada …

26 classification  predictive-models  categorical-data  continuous-data  discrete-data 

Saya memiliki latar belakang pemula dalam deret waktu (beberapa estimasi / perkiraan ARIMA) dan saya menghadapi masalah yang tidak sepenuhnya saya pahami. Bantuan apa pun akan sangat dihargai. Saya menganalisis beberapa seri waktu, semua dalam interval waktu yang sama dan semua dari frekuensi yang sama, semua menggambarkan tipe data yang …

26 time-series 

Saya baru belajar Mesin, dan saya sedang mencoba mempelajarinya sendiri. Baru-baru ini saya membaca beberapa catatan kuliah dan memiliki pertanyaan mendasar. Slide 13 mengatakan bahwa "Estimasi Least Square sama dengan Estimasi Kemungkinan Maksimum dalam model Gaussian". Sepertinya itu adalah sesuatu yang sederhana, tetapi saya tidak dapat melihat ini. Bisakah seseorang …

26 regression  bayesian  least-squares 

Saya ingin mendapatkan batas untuk interval kepercayaan untuk rasio dua cara. Misalkan, dan menjadi independen, rasio rata-rata . Saya mencoba menyelesaikan: tetapi persamaan itu tidak dapat diselesaikan untuk banyak kasus (tanpa akar). Apakah saya melakukan sesuatu yang salah? Apakah ada pendekatan yang lebih baik? Terima kasih100 ( 1 - α …

26 normal-distribution  mean 

Akankah perangkat lunak pada akhirnya membuat ahli statistik menjadi usang? Apa yang dilakukan yang tidak dapat diprogram ke dalam komputer?

26 machine-learning  dataset  careers 

Apakah ada makalah / buku / ide tentang hubungan antara jumlah fitur dan jumlah pengamatan yang harus dimiliki untuk melatih classifier "kuat"? Sebagai contoh, anggap saya memiliki 1000 fitur dan 10 pengamatan dari dua kelas sebagai satu set pelatihan, dan 10 pengamatan lainnya sebagai set pengujian. Saya melatih beberapa classifier …

26 machine-learning 

Sudah ada diskusi yang sangat baik tentang bagaimana mesin vektor menangani klasifikasi, tapi saya sangat bingung tentang bagaimana mesin vektor mendukung generalisasi untuk regresi. Adakah yang mau memberi tahu saya?

26 regression  machine-learning  svm 

Dalam regresi linier berganda, saya dapat memahami korelasi antara residual dan prediktor adalah nol, tetapi apa korelasi yang diharapkan antara residual dan variabel kriteria? Haruskah diharapkan nol atau berkorelasi tinggi? Apa artinya itu?

26 regression  residuals