Statistik dan Big Data

Saya memiliki model peramalan untuk seri waktu dan saya ingin menghitung kesalahan prediksi out-of-sample. Saat ini strategi saya berikut ini adalah salah satu yang disarankan di blog Rob Hyndman (dekat bagian bawah halaman) yang berjalan seperti ini (dengan asumsi time series dan satu set pelatihan ukuran k )y1, ... , …

13 time-series  forecasting 

Saya memiliki 3 percobaan masing-masing pada 87 hewan di masing-masing 2 konteks (beberapa data yang hilang; tidak ada data yang hilang = 64 hewan). Dalam konteks, saya memiliki banyak langkah-langkah khusus (waktu untuk masuk, beberapa kali kembali ke tempat tinggal, dll), jadi saya ingin mengembangkan 2 sampai 3 skor perilaku …

13 repeated-measures  pca  dimensionality-reduction 

Misalkan kita memiliki kovariat x 1 , ... , x n dan variabel hasil biner ynnnx1,…,xnx1,…,xnx_1, \dots, x_nyyy . Beberapa kovariat ini termasuk kategori dengan banyak tingkatan. Lainnya kontinu. Bagaimana Anda memilih model "terbaik"? Dengan kata lain, bagaimana Anda memilih kovariat mana yang akan dimasukkan dalam model? Apakah Anda memodelkan …

13 logistic  regression-strategies 

Pertanyaan ini muncul dari kebingungan aktual saya tentang bagaimana memutuskan apakah model logistik cukup baik. Saya memiliki model yang menggunakan keadaan berpasangan-proyek individu dua tahun setelah mereka dibentuk sebagai variabel dependen. Hasilnya berhasil (1) atau tidak (0). Saya memiliki variabel independen yang diukur pada saat pembentukan pasangan. Tujuan saya adalah …

13 r  logistic  goodness-of-fit  residuals 

Saya ingin memprediksi masalah kesehatan. Saya memiliki 3 kategori hasil yang dipesan: 'normal', 'ringan', dan 'berat'. Saya ingin memprediksi ini dari dua variabel prediktor, hasil tes (kontinu, interval kovariat) dan riwayat keluarga dengan masalah ini (ya atau tidak). Dalam sampel saya, probabilitasnya adalah 55% (normal), 35% (ringan), dan 10% (berat). …

13 logistic  ordered-logit 

(Terima kasih banyak atas tanggapan cepatnya! Saya melakukan pekerjaan yang buruk dalam mengajukan pertanyaan, jadi izinkan saya mencoba lagi.) Saya tidak tahu bagaimana cara mengetahui apakah perbedaan antara dua korelasi Spearman signifikan secara statistik. Saya ingin tahu bagaimana cara mengetahuinya. Alasan saya ingin mengetahuinya adalah bahwa dalam makalah berikut: Interpretasi …

13 hypothesis-testing  statistical-significance  spearman-rho 

Saya sedang melakukan banyak penelitian tentang kejahatan terorganisir di Asia Timur untuk sebuah proyek sebagai bantuan kepada teman penulis saya, dan saya perhatikan bahwa ada ekonom dan jurnalis terkemuka yang, bersama-sama, memperkirakan nilai operasi pasar gelap di seluruh dunia . Apa metodologi untuk ini? Bagaimana angka-angka ini bersatu? Apakah angka-angka …

13 measurement  macroeconomics 

Saya akan melakukan studi tentang manfaat dari satu stimulus dibandingkan yang lain dengan desain dalam-subjek. Saya memiliki skema permutasi yang dirancang untuk mengurangi efek urutan beberapa bagian penelitian (urutan jenis tugas, urutan stimulus, urutan tugas yang ditetapkan). Skema permutasi menentukan bahwa ukuran sampel dapat dibagi 8. Untuk menentukan ukuran sampel …

13 experiment-design  sample-size  power-analysis  sequential-analysis 

Deskripsi penelitian: Saya telah mengamati kesalahan umum di antara meta-analisis, berkaitan dengan penanganan replikasi dalam studi. Tidak jelas bagi saya jika kesalahan membatalkan studi ketika asumsi dinyatakan. Namun, seperti yang saya pahami, asumsi ini melanggar premis dasar statistik. Sebagai contoh, sebuah penelitian menguji efek kimia pada respon Y .XXXYYY Analisis …

13 repeated-measures  meta-analysis 

Saya memiliki model untuk memprediksi lintasan (x sebagai fungsi waktu) dengan beberapa parameter. Saat ini, saya menghitung root mean square error (RMSE) antara lintasan yang diprediksi dan lintasan yang direkam secara eksperimental. Saat ini, saya meminimalkan perbedaan ini (RMSE) menggunakan simplex (fminsearch in matlab). Meskipun metode ini berfungsi untuk memberikan …

13 maximum-likelihood  curve-fitting 

Sebuah pertanyaan yang mungkin sangat mendasar tentang ANOVA multi-faktorial. Asumsikan desain dua arah di mana kami menguji kedua efek utama A, B, dan interaksi A: B. Ketika menguji efek utama untuk A dengan tipe I SS, efek SS dihitung sebagai perbedaan , di mana adalah jumlah kesalahan residual kuadrat untuk …

13 anova  linear-model 

BBBVar(maxiXi)≤B,Var(maxiXi)≤B, \mbox{Var}(\max_i X_i) \leq B \enspace, X={X1,…,XM}X={X1,…,XM}X = \{ X_1, \ldots, X_M \}MMMμ1,…,μMμ1,…,μM\mu_1, \ldots, \mu_Mσ21,…,σ2Mσ12,…,σM2\sigma_1^2, \ldots, \sigma_M^2 Saya dapat menyimpulkan bahwa tetapi batasan ini tampaknya sangat longgar. Tes numerik tampaknya menunjukkan bahwa mungkin merupakan suatu kemungkinan, tetapi saya belum dapat membuktikannya. Bantuan apa pun dihargai.Var(maxiXi)≤∑iσ2i,Var(maxiXi)≤∑iσi2, \mbox{Var}(\max_i X_i) \leq \sum_i \sigma_i^2 …

13 variance  bounds  maximum 

Model analisis diskriminan Gaussian mempelajari dan kemudian menerapkan aturan Bayes untuk mengevaluasi Karenanya, mereka adalah model generatif. Lalu mengapa disebut analisis diskriminan? Jika itu karena kami akhirnya mendapatkan kurva diskriminan antara kelas, maka itu terjadi untuk semua model generatif.P( x | y)P(x|y)P(x|y)P( y| x)= P( x | y) Pp r …

13 normal-distribution  discriminant-analysis  generative-models 

Menggunakan R atau Excel, apa cara termudah untuk mengubah tabel frekuensi menjadi vektor nilai? Misalnya, Bagaimana Anda mengonversi tabel frekuensi berikut Value Frequency 1. 2 2. 1 3. 4 4. 2 5. 1 ke dalam vektor berikut? 1, 1, 2, 3, 3, 3, 3, 4, 4, 5

13 r  dataset  excel 

Judulnya mengatakan itu semua, dan saya bingung. Berikut ini menjalankan langkah-langkah berulang aov () di R, dan menjalankan apa yang saya pikir adalah panggilan lm () yang setara, tetapi mereka mengembalikan sisa kesalahan yang berbeda (meskipun jumlah kuadratnya sama). Jelas bahwa nilai residu dan pas dari aov () adalah yang …

13 r  anova  repeated-measures  linear-model