Statistik dan Big Data

Saya telah menggunakan fungsi 'polr' dalam paket MASS untuk menjalankan regresi logistik ordinal untuk variabel respon kategoris ordinal dengan 15 variabel penjelas kontinu. Saya telah menggunakan kode (ditunjukkan di bawah) untuk memeriksa bahwa model saya memenuhi asumsi peluang proporsional mengikuti saran yang diberikan dalam panduan UCLA . Namun, saya sedikit …

9 r  logistic  assumptions  ordered-logit  polr 

Pertimbangkan model linier ysaya= α + βxsaya+ ϵsayayi=α+βxi+ϵiy_i= \alpha + \beta x_i + \epsilon_i dan perkiraan untuk kemiringan dan mencegat dan menggunakan kuadrat terkecil biasa. Referensi ini untuk statistik matematika membuat pernyataan bahwa dan independen (dalam bukti teorema mereka). ß a ßα^α^\hat{\alpha}β^β^\hat{\beta}α^α^\hat{\alpha}β^β^\hat{\beta} Saya tidak yakin saya mengerti mengapa. Sejak α^= …

9 regression 

Saya memiliki variabel berbeda yang berinteraksi dalam suatu populasi. Pada dasarnya saya telah melakukan inventarisasi kaki seribu dan mengukur beberapa nilai medan lainnya, seperti: Spesies dan jumlah spesimen yang dikumpulkan Lingkungan yang berbeda di mana hewan berada pH Persentase bahan organik jumlah P, K, Mg, Ca, Mn, Fe, Zn, Cu …

9 pca  multivariate-analysis  ecology  correspondence-analysis 

Adakah yang bisa menjelaskan bagaimana prosedur FDR dapat memperkirakan FDR tanpa model / asumsi tingkat dasar positif sebenarnya?

9 false-discovery-rate 

Saya ingin menghitung / mengevaluasi konvolusi g(x)=∫Df(x−t)ϕ(t)dt,g(x)=∫Df(x−t)ϕ(t)dt,g(x)=\int_D f(x-t) \phi(t) dt, di mana adalah kepadatan dan φ adalah fungsi mulus dengan dukungan kompak D . Konvolusi tidak tersedia dalam bentuk tertutup dan saya perlu mengintegrasikannya secara numerik. Pertanyaan saya adalah: Apakah ada cara yang efisien untuk melakukan ini? Saya ingin mengimplementasikannya …

9 r  convolution 

Saya memiliki input yang sangat jarang, misalnya lokasi fitur tertentu dalam gambar input. Selanjutnya setiap fitur dapat memiliki beberapa deteksi (tidak yakin apakah ini akan mempengaruhi desain sistem). Ini saya akan menyajikan sebagai 'gambar biner' saluran k dengan piksel ON yang mewakili keberadaan fitur itu, dan sebaliknya. Kita dapat melihat …

9 neural-networks  deep-learning  sparse 

Saya sibuk dengan pemodelan ARIMA ditambah dengan variabel eksogen untuk tujuan pemodelan promosi dan saya sulit menjelaskannya kepada pengguna bisnis. Dalam beberapa kasus paket perangkat lunak berakhir dengan fungsi transfer sederhana yaitu parameter * Variabel Eksogen. Dalam hal ini interpretasinya mudah yaitu kegiatan promosi X (diwakili oleh variabel biner eksogen) …

9 time-series  data-visualization  forecasting  arima  causality 

Saat ini saya sedang membaca karya Pearl (Pearl, 2009, 2nd edition) tentang hubungan sebab akibat dan perjuangan untuk membangun hubungan antara identifikasi nonparametrik dari suatu model dan estimasi aktual. Sayangnya, Pearl sendiri sangat diam tentang topik ini. Untuk memberikan contoh, saya memiliki model sederhana dalam pikiran dengan jalur kausal, , …

9 estimation  references  causality 

Saya memiliki sampel (ukuran 250) dari suatu populasi. Saya tidak tahu distribusi penduduk. Pertanyaan utama: Saya ingin estimasi titik dari 1 st -percentile dari populasi, dan kemudian saya ingin interval kepercayaan 95% sekitar estimasi titik saya. Perkiraan poin saya akan menjadi sampel pertama st- persentil. Saya menyatakannya .xxx Setelah itu, …

9 confidence-interval  bootstrap  quantiles  extreme-value 

Ditutup . Pertanyaan ini didasarkan pada pendapat . Saat ini tidak menerima jawaban. Ingin meningkatkan pertanyaan ini? Perbarui pertanyaan sehingga dapat dijawab dengan fakta dan kutipan dengan mengedit posting ini . Ditutup 5 tahun yang lalu . Saya lulusan baru dari universitas saya dan gelar sarjana saya di bidang Statistik. …

9 careers 

Saya cukup baru dalam hal statistik (beberapa program Uni tingkat pemula) dan ingin tahu tentang pengambilan sampel dari distribusi yang tidak diketahui. Khususnya, jika Anda tidak tahu tentang distribusi yang mendasarinya, apakah ada cara untuk "menjamin" bahwa Anda mendapatkan sampel yang representatif? Contoh untuk mengilustrasikan: katakanlah Anda mencoba mencari tahu …

9 distributions  estimation  sampling  sample-size  algorithms 

Saya dapatkan dari posting lain bahwa seseorang tidak dapat menghubungkan 'pentingnya' atau 'signifikansi' dengan variabel prediktor yang memasuki model laso karena menghitung nilai-p variabel tersebut atau standar deviasi masih dalam proses. Di bawah alasan itu, apakah benar untuk menyatakan bahwa seseorang TIDAK BISA mengatakan bahwa variabel yang dikeluarkan dari model …

9 statistical-significance  bootstrap  simulation  lasso  regression-strategies 

Pertimbangkan kode R berikut: > data <- data.frame( a=c(NA,2,3,4,5,6),b=c(2.2,NA,6.1,8.3,10.2,12.13),c=c(4.2,7.9,NA,16.1,19.9,23)) > data a b c 1 NA 2.20 4.2 2 2 NA 7.9 3 3 6.10 NA 4 4 8.30 16.1 5 5 10.20 19.9 6 6 12.13 23.0 Seperti yang Anda lihat, saya telah merekayasa data sehingga secara kasar c …

9 r  data-imputation  multiple-imputation 

Bagaimana Anda menghitung yang sesuai sebelumnya jika Anda memiliki kesalahan pengukuran instrumen? Paragraf ini dari buku Cressie "Statistics for Spatio-Temporal Data": Seringkali kasus bahwa beberapa informasi sebelumnya tersedia mengenai varians pengukuran-kesalahan, memungkinkan model parameter yang cukup informatif untuk ditentukan. Sebagai contoh, jika kita mengasumsikan kesalahan pengukuran independen bersyarat yang iid …

9 bayesian  standard-error  error  prior  measurement-error 

Pertanyaan ini mungkin bodoh, tetapi saya perhatikan bahwa ada dua formulasi berbeda dari regresi Lasso . Kita tahu bahwa masalah Lasso adalah untuk meminimalkan tujuan yang terdiri dari kerugian kuadrat ditambah hukuman penalti -1, dinyatakan sebagai berikut, LLLminβ∥y−Xβ∥22+λ∥β∥1minβ‖y−Xβ‖22+λ‖β‖1 \min_\beta \|y - X \beta\|_2^2 + \lambda \|\beta\|_1 \; Tetapi sering kali …

9 lasso