Statistik dan Big Data

Saya telah diberi tugas ini dan bingung. Seorang kolega meminta saya untuk memperkirakan dan dari bagan berikut: x l o w e rxu p p e rxkamuhalhalerx_{upper}xl o w e rxlHaiwerx_{lower} Kurva sebenarnya adalah distribusi kumulatif, dan x adalah semacam pengukuran. Dia tertarik untuk mengetahui apa nilai yang sesuai pada …

11 estimation  pdf  curve-fitting  logistic-curve 

Jerome Cornfield telah menulis: Salah satu buah terbaik dari revolusi Nelayan adalah gagasan pengacakan, dan ahli statistik yang menyetujui beberapa hal lain setidaknya telah menyetujui hal ini. Namun terlepas dari kesepakatan ini dan meskipun penggunaan prosedur alokasi acak yang meluas secara klinis dan dalam bentuk eksperimen lainnya, status logisnya, yaitu, …

11 small-sample  random-allocation 

Saya punya pertanyaan tentang interpretasi panggilan tsboot di R. Saya memeriksa dokumentasi paket Kendall dan paket boot, tetapi saya tidak lebih pintar dari sebelumnya. Ketika saya menjalankan bootstrap menggunakan misalnya contoh dalam paket Kendall, di mana statistik uji adalah tau Kendall: library(Kendall) # Annual precipitation entire Great Lakes # The …

11 r  bootstrap 

Saya menggunakan kode R berikut agar sesuai dengan model probit: p1 <- glm(natijeh ~ ., family=binomial(probit), data=data1) stepwise(p1, direction='backward/forward', criterion='BIC') Saya ingin tahu apa yang dilakukan stepwisedan backward/forwarddilakukan dengan tepat dan bagaimana memilih variabel?

11 r  probit  stepwise-regression 

Sepertinya persyaratan penuh seringkali cukup sulit diperoleh, namun program seperti JAGS dan BUGS mendapatkannya secara otomatis. Dapatkah seseorang menjelaskan bagaimana mereka secara algoritmik menghasilkan persyaratan penuh untuk spesifikasi model yang sewenang-wenang?

11 bayesian  conditional-probability  jags  bugs  gibbs 

Saya telah melakukan klasifikasi menggunakan beberapa pengklasifikasi untuk data berlabel 2 kelas, dan saya menggunakan validasi silang 5 kali lipat. Untuk setiap lipatan saya menghitung tp, tn, fp, dan fn. Kemudian saya menghitung akurasi, ketepatan, daya ingat dan skor-F untuk setiap tes. Pertanyaan saya adalah, ketika saya ingin hasil rata-rata, …

11 classification  cross-validation  precision-recall 

Dengan menggunakan Amelia di R, saya memperoleh beberapa dataset yang terkait. Setelah itu, saya melakukan tes tindakan berulang di SPSS. Sekarang, saya ingin menggabungkan hasil tes. Saya tahu bahwa saya dapat menggunakan aturan Rubin (diimplementasikan melalui beberapa paket imputasi dalam R) untuk menyatukan sarana dan kesalahan standar, tetapi bagaimana cara …

11 r  spss  p-value  multiple-imputation  pooling 

Apakah ada strategi untuk memilih jumlah pohon dalam GBM? Secara khusus, ntreesargumen dalam R's gbmfungsi. Saya tidak mengerti mengapa Anda tidak harus menetapkan ntreesnilai wajar tertinggi. Saya perhatikan bahwa jumlah pohon yang lebih besar jelas mengurangi variabilitas hasil dari beberapa GBM. Saya tidak berpikir bahwa jumlah pohon yang tinggi akan …

11 r  machine-learning  gbm 

Dalam sebuah posting blog , saya telah menemukan klaim itu "Saya percaya WG Cochrane poin pertama (sekitar tahun 1970-an) bahwa dengan interval kepercayaan dalam pengaturan pengamatan, ukuran sampel yang kecil menghasilkan cakupan yang lebih baik dengan sampel yang cukup besar memberikan cakupan mendekati nol!" Sekarang saya berasumsi bahwa lebar CI …

11 confidence-interval  t-test  simulation 

Saya sedang mengerjakan masalah klasifikasi deret waktu di mana inputnya adalah data penggunaan suara deret waktu (dalam detik) selama 21 hari pertama dari akun ponsel. Variabel target yang sesuai adalah apakah akun tersebut dibatalkan atau tidak dalam rentang 35-45 hari. Jadi itu adalah masalah klasifikasi biner. Saya mendapatkan hasil yang …

11 time-series  classification 

Saya telah membaca tentang estimasi kemungkinan maksimum dan estimasi posteriori maksimum dan sejauh ini saya telah bertemu contoh konkret hanya dengan estimasi kemungkinan maksimum. Saya telah menemukan beberapa contoh abstrak estimasi posteriori maksimum, tetapi belum ada yang konkret dengan angka di atasnya: S Ini bisa sangat luar biasa, hanya bekerja …

11 bayesian  estimation  posterior 

Saya memiliki model regresi linier di mana variabel dependen dicatat dan variabel independen linear. Koefisien kemiringan untuk variabel independen utama negatif: . Tidak yakin bagaimana menafsirkannya.−.0564−.0564-.0564 Apakah saya menggunakan nilai absolut kemudian mengubahnya menjadi negatif seperti ini: (exp(0.0564)−1)⋅100=5.80(exp⁡(0.0564)−1)⋅100=5.80(\exp(0.0564)-1) \cdot 100 = 5.80 atau Apakah saya memasukkan koefisien negatif seperti ini: …

11 linear-model  interpretation  regression-coefficients 

Saya mencoba menggunakan neuralnetpaket R (dokumentasi di sini ) untuk prediksi. Inilah yang saya coba lakukan: library(neuralnet) x <- cbind(runif(50, min=1, max=500), runif(50, min=1, max=500)) y <- x[, 1] * x[, 2] train <- data.frame(x, y) n <- names(train) f <- as.formula(paste('y ~', paste(n[!n %in% 'y'], collapse = ' + …

11 r  neural-networks  prediction  error 

Diberikan urutan variabel acak iid, katakanlah, untuk , saya mencoba untuk mengikat berapa kali rata-rata empiris berarti akan melebihi nilai, , saat kami terus menggambar sampel, yaitu: i = 1 , 2 , . . . , n 1Xi∈[0,1]Xi∈[0,1]X_i \in [0,1]i=1,2,...,ni=1,2,...,ni = 1,2,...,nc≥0T d e f = n ∑ j=1P({ …

11 mathematical-statistics  expected-value  bounds 

Tidak yakin apakah ini sesuai untuk situs ini, tapi saya mulai MSE saya dalam ilmu komputer (BS dalam matematika terapan) dan ingin mendapatkan latar belakang yang kuat dalam pembelajaran mesin (saya kemungkinan besar akan mengejar gelar PhD). Salah satu sub-minat saya adalah jaringan saraf. Apa latar belakang matematika yang baik …

11 machine-learning  neural-networks  mathematical-statistics  references