Pertanyaan yang diberi tag «missing-data»

Saya telah membaca komentar yang bagus mengenai bagaimana menangani nilai yang hilang sebelum menerapkan SVD, tetapi saya ingin tahu cara kerjanya dengan contoh sederhana: Movie1 Movie2 Movie3 User1 5 4 User2 2 5 5 User3 3 4 User4 1 5 User5 5 1 5 Mengingat matriks di atas, jika saya …

8 r  missing-data  data-imputation  svd  sampling  matlab  mcmc  importance-sampling  predictive-models  prediction  algorithms  graphical-model  graph-theory  r  regression  regression-coefficients  r-squared  r  regression  modeling  confounding  residuals  fitting  glmm  zero-inflation  overdispersion  optimization  curve-fitting  regression  time-series  order-statistics  bayesian  prior  uninformative-prior  probability  discrete-data  kolmogorov-smirnov  r  data-visualization  histogram  dimensionality-reduction  classification  clustering  accuracy  semi-supervised  labeling  state-space-models  t-test  biostatistics  paired-comparisons  paired-data  bioinformatics  regression  logistic  multiple-regression  mixed-model  random-effects-model  neural-networks  error-propagation  numerical-integration  time-series  missing-data  data-imputation  probability  self-study  combinatorics  survival  cox-model  statistical-significance  wilcoxon-mann-whitney  hypothesis-testing  distributions  normal-distribution  variance  t-distribution  probability  simulation  random-walk  diffusion  hypothesis-testing  z-test  hypothesis-testing  data-transformation  lognormal  r  regression  agreement-statistics  classification  svm  mixed-model  non-independent  observational-study  goodness-of-fit  residuals  confirmatory-factor  neural-networks  deep-learning 

Saya memiliki satu set data x, y yang saya gunakan untuk membangun hutan acak. Data x adalah vektor nilai yang mencakup beberapa NAS. Jadi saya gunakan rfImputeuntuk menangani data yang hilang dan membuat hutan acak. Sekarang saya memiliki observasi baru x yang tidak terlihat (dengan NA) dan saya ingin memprediksi …

8 r  random-forest  missing-data 

Saya berharap untuk menyatukan hasil dari serangkaian analisis mendasar yang dilakukan pada data yang dilipatgandakan (misalnya regresi berganda, ANOVA). Beberapa imputasi dan analisis telah diselesaikan dalam SPSS tetapi SPSS tidak memberikan hasil gabungan untuk beberapa statistik termasuk nilai-F, matriks kovarian, R-Squared dll. Saya telah melakukan beberapa upaya untuk mengatasi masalah …

8 spss  missing-data  multiple-imputation  pooling 

Apa sajakah pendekatan khas untuk menangani data yang tidak lengkap di Filter Kalman? Saya sedang berbicara tentang situasi di mana beberapa elemen dari vektor yang diamati hilang, berbeda dari kasus di mana seluruh vektor yang diamati tidak terjawab. Cara lain untuk berpikir tentang ini adalah bahwa dimensi dari vektor yang …

8 missing-data  kalman-filter 

Proyek saya saat ini mungkin mengharuskan saya untuk membuat model untuk memprediksi perilaku sekelompok orang tertentu. set data pelatihan hanya berisi 6 variabel (id hanya untuk tujuan identifikasi): id, age, income, gender, job category, monthly spend di mana monthly spendadalah variabel respon. Tetapi dataset pelatihan berisi sekitar 3 juta baris, …

8 modeling  large-data  overfitting  clustering  algorithms  error  spatial  r  regression  predictive-models  linear-model  average  measurement-error  weighted-mean  error-propagation  python  standard-error  weighted-regression  hypothesis-testing  time-series  machine-learning  self-study  arima  regression  correlation  anova  statistical-significance  excel  r  regression  distributions  statistical-significance  contingency-tables  regression  optimization  measurement-error  loss-functions  image-processing  java  panel-data  probability  conditional-probability  r  lme4-nlme  model-comparison  time-series  probability  probability  conditional-probability  logistic  multiple-regression  model-selection  r  regression  model-based-clustering  svm  feature-selection  feature-construction  time-series  forecasting  stationarity  r  distributions  bootstrap  r  distributions  estimation  maximum-likelihood  garch  references  probability  conditional-probability  regression  logistic  regression-coefficients  model-comparison  confidence-interval  r  regression  r  generalized-linear-model  outliers  robust  regression  classification  categorical-data  r  association-rules  machine-learning  distributions  posterior  likelihood  r  hypothesis-testing  normality-assumption  missing-data  convergence  expectation-maximization  regression  self-study  categorical-data  regression  simulation  regression  self-study  self-study  gamma-distribution  modeling  microarray  synthetic-data 

Saya punya masalah di mana y=a+by=a+by = a + b Saya amati, tetapi bukan atau . Saya ingin memperkirakanaaabbb b=f(x)+ϵb=f(x)+ϵb = f(x) + \epsilon Aku bisa memperkirakan , menggunakan semacam model regresi. Ini memberi saya . Saya kemudian bisa memperkirakanaaab^b^\hat b b^=f(x)+ϵb^=f(x)+ϵ\hat b = f(x) + \epsilon Masalah pertama: model …

8 missing-data  multiple-imputation  expectation-maximization 

Saya punya dua pertanyaan tentang menggunakan hutan acak (khususnya randomForest di R) untuk hilangnya nilai imputasi (dalam ruang prediktor). 1) Bagaimana cara kerja algoritma imputasi - khususnya bagaimana dan mengapa label kelas diperlukan untuk imputasi? Apakah matriks kedekatan yang berfungsi untuk menimbang nilai rata-rata untuk menentukan nilai yang hilang yang …

8 data-mining  predictive-models  missing-data  random-forest  data-imputation 

Saya memiliki masalah dalam menemukan solusi tentang cara menjalankan tes post-hoc (Tukey HSD) setelah 2-faktor (keduanya dalam-mata pelajaran) mengukur ANOVA berulang dalam R. Untuk ANOVA, saya telah menggunakan fungsi aov: summary(aov(dv ~ x1 * x2 + Error(subject/(x1*x2)), data=df1)) Setelah membaca jawaban untuk pertanyaan lain, saya mengumpulkan bahwa saya pertama-tama harus …

8 r  anova  repeated-measures  post-hoc  tukey-hsd  goodness-of-fit  curve-fitting  sem  latent-variable  mplus  anova  post-hoc  tukey-hsd  markov-process  image-processing  r  time-series  causality  granger-causality  anova  mixed-model  lme4-nlme  random-effects-model  r  matlab  data-transformation  multinomial  notation  estimation  nonparametric  logistic  r  missing-data  multiple-imputation  mice 

Saya menghitung beberapa probabilitas bersyarat, dan interval kepercayaan 95% yang terkait. Untuk banyak kasus saya, saya memiliki jumlah xkeberhasilan langsung dari npercobaan (dari tabel kontingensi), sehingga saya dapat menggunakan interval kepercayaan Binomial, seperti yang disediakan oleh binom.confint(x, n, method='exact')in R. Namun dalam kasus lain, saya tidak memiliki data seperti itu, …

8 r  bayesian  confidence-interval  conditional-probability  hidden-markov-model  segmentation  hypothesis-testing  statistical-significance  multiple-comparisons  multiple-regression  r  regression  survey  sample  finite-population  pca  model-selection  dataset  partitioning  clustering  time-series  least-squares  regression  standard-error  causality  r  time-series  outliers  missing-data  machine-learning  svm  hypothesis-testing  discrete-data  r  data-visualization  survey  likert  finance  regression  pca  feature-selection  stepwise-regression  underdetermined  svm  natural-language 

Saya menggunakan ARMA pada dataset dengan sampel yang hilang. Bagaimana saya memperlakukan mereka? Apakah Anda menyarankan untuk membuat interpolasi linier / nonlinier atau hanya membuat mereka keluar dan mempertimbangkan dua sampel dengan data yang hilang di antaranya sebagai sampel berturut-turut?

8 time-series  arima  missing-data  fitting  interpolation 

Apakah ada batas yang paling tidak dapat diterima saat menggunakan multiple imputation (MI)? Sebagai contoh, bisakah saya menggunakan MI jika nilai yang hilang dalam suatu variabel adalah 20% dari kasus sementara dan variabel lain memiliki nilai yang hilang tetapi tidak sampai tingkat yang tinggi?

8 missing-data  data-imputation 

Apakah metode substitusi rata-rata untuk mengganti data yang hilang ketinggalan zaman? Apakah ada model yang lebih canggih yang harus digunakan? Jika demikian, apakah mereka?

8 missing-data 

Saya menggunakan model lag terdistribusi untuk menganalisis data deret waktu. Durasi periode penelitian adalah 18 tahun, dan observasi adalah data tahunan. Ketika menyertakan efek lag 1 tahun, tahun pertama variabel lag menjadi hilang. Kemudian, efek lag 2 tahun membuat dua data pertama variabel lag hilang, dan seterusnya. Saya akan menganalisis …

8 time-series  missing-data 

Saya mencoba menghubungkan usia (6-90 thn) dengan kenyaringan suara (dalam dB). Namun, data saya tidak mengandung titik data dalam kisaran 20-50 tahun. Ukuran korelasi apa yang paling sesuai dengan jeda yang begitu besar, dan mengapa? Saya telah menggunakan Kendall Tau sejauh ini. Perhatikan bahwa kami tidak berurusan dengan data yang …

8 distributions  correlation  missing-data