Statistik dan Big Data

Saya baru mulai belajar tentang statistik dan model barang. Saat ini, pemahaman saya adalah bahwa kami menggunakan MLE untuk memperkirakan parameter terbaik untuk suatu model. Namun, ketika saya mencoba memahami cara kerja jaringan saraf, sepertinya mereka biasanya menggunakan pendekatan lain untuk memperkirakan parameter. Mengapa kita tidak menggunakan MLE atau mungkinkah …

23 maximum-likelihood  neural-networks 

Pertanyaan ini telah ditanyakan sebelumnya di sini dan di sini tetapi saya tidak berpikir jawabannya menjawab pertanyaan secara langsung. Apakah penelitian yang kurang bertenaga telah meningkatkan kemungkinan positif palsu? Beberapa artikel berita membuat pernyataan ini. Sebagai contoh : Kekuatan statistik yang rendah adalah berita buruk. Studi underpowered lebih cenderung melewatkan …

23 hypothesis-testing  power  false-discovery-rate 

Setelah banyak memukulkan Cross Validated, saya masih tidak merasa seperti saya lebih dekat untuk memahami perbedaan KL di luar bidang teori informasi. Agak aneh jika seseorang dengan latar belakang matematika lebih mudah memahami penjelasan teori informasi. Untuk menguraikan pemahaman saya dari latar belakang teori informasi: Jika kita memiliki variabel acak …

23 inference  entropy  information-theory  kullback-leibler  compression 

Dalam beberapa hal ini adalah persimpangan saya dari math.stackexchange , dan saya merasa bahwa situs ini mungkin menyediakan khalayak luas. Saya mencari pengantar matematika untuk pembelajaran mesin. Khususnya, banyak literatur yang dapat ditemukan relatif tidak tepat dan banyak halaman dihabiskan tanpa konten apa pun. Namun, mulai dari literatur seperti itu, …

23 machine-learning  references  pac-learning 

Biarkan dan menjadi 2 iidrv di mana . Saya ingin tahu distribusi untuk .X 2 log ( X 1 ) , log ( X 2 ) ∼ N ( μ , σ ) X 1 - X 2X1X1X_1X2X2X_2log( X1) , log( X2) ∼ N( μ , σ)log⁡(X1),log⁡(X2)∼N(μ,σ)\log(X_1),\log(X_2) \sim N(\mu,\sigma)X1- X2X1-X2X_1 …

23 probability  distributions  random-variable  lognormal  approximation 

Saya sedang membaca artikel ini di Nature di mana beberapa fallacy dijelaskan dalam konteks analisis data. Saya perhatikan bahwa kesalahan penembak jitu Texas sangat sulit untuk dihindari: Perangkap kognitif yang menunggu selama analisis data diilustrasikan oleh dongeng penembak jitu Texas: penembak jitu tidak kompeten yang menembakkan pola acak peluru di …

23 eda  fallacy 

Jadi saya mencoba melakukan pretraining pada gambar manusia menggunakan jaring konvolusional. Saya membaca makalah ( Paper1 dan Paper2 ) dan tautan stackoverflow ini , tapi saya tidak yakin saya mengerti struktur jaring (tidak didefinisikan dengan baik di koran). Pertanyaan: Saya dapat meminta input saya diikuti oleh layer noise diikuti oleh …

23 neural-networks  deep-learning  autoencoders  deep-belief-networks 

Saya mencoba menyelesaikan pertanyaan berikut: Pemain A memenangkan 17 dari 25 pertandingan sementara pemain B memenangkan 8 dari 20 - apakah ada perbedaan yang signifikan antara kedua rasio? Hal yang harus dilakukan dalam R yang terlintas dalam pikiran adalah sebagai berikut: > prop.test(c(17,8),c(25,20),correct=FALSE) 2-sample test for equality of proportions without …

23 r  hypothesis-testing  statistical-significance  binomial  proportion 

Dalam menunjukkan bahwa MSE dapat didekomposisi menjadi varians plus kuadrat Bias, bukti di Wikipedia memiliki langkah, disorot dalam gambar. Bagaimana cara kerjanya? Bagaimana harapan didorong ke dalam produk dari langkah ke 3 ke langkah ke 4? Jika kedua ketentuan tersebut independen, tidakkah harapan tersebut dapat diterapkan pada kedua ketentuan tersebut? …

23 random-variable  expected-value  mse 

Saya memiliki pertanyaan tentang semantik yang saya inginkan tentang pendapat sesama ahli statistik. Kita tahu model seperti logistik, Poisson, dll. Jatuh di bawah payung model linear umum. Model ini mencakup fungsi-fungsi nonlinear dari parameter, yang pada gilirannya dapat dimodelkan menggunakan kerangka model linier dengan menggunakan fungsi tautan yang sesuai. Saya …

23 logistic  generalized-linear-model  poisson-regression  nonlinear  link-function 

Saya melihat bahwa kedua fungsi merupakan bagian dari metode penambangan data seperti Gradient Boosting Regressors. Saya melihat bahwa itu adalah objek yang terpisah juga. Bagaimana hubungan keduanya secara umum?

23 regression  classification  data-mining  decision-theory 

Untuk regresi linier sederhana, koefisien regresi dapat dihitung langsung dari matriks varians-kovarians , oleh mana adalah indeks variabel dependen, dan adalah indeks variabel penjelas.CCCCd,eCe,eCd,eCe,e C_{d, e}\over C_{e,e} dddeee Jika seseorang hanya memiliki matriks kovarians, apakah mungkin untuk menghitung koefisien untuk model dengan beberapa variabel penjelas? ETA: Untuk dua variabel penjelas, …

23 regression  regression-coefficients  covariance-matrix 

Pertanyaannya sangat sederhana: mengapa, ketika kami mencoba menyesuaikan model dengan data kami, linear atau non-linear, apakah kami biasanya mencoba meminimalkan jumlah kuadrat kesalahan untuk mendapatkan estimator kami untuk parameter model? Mengapa tidak memilih beberapa fungsi tujuan lain untuk diminimalkan? Saya mengerti bahwa, karena alasan teknis, fungsi kuadrat lebih bagus daripada …

23 econometrics  least-squares 

Saya mengambil beberapa kursus statistik di perguruan tinggi tetapi saya menemukan bahwa pendidikan saya sangat didorong oleh teori. Saya ingin tahu apakah ada di antara Anda yang memiliki teks dalam Statistik Terapan (pada tingkat pascasarjana) yang Anda rekomendasikan atau telah memiliki pengalaman yang baik dengan.

23 regression  references  modeling  experiment-design  application 

Saya berulang kali menolak atau gagal menolak hipotesis nol. Dalam kegagalan untuk menolak kasus, Anda menyimpulkan bahwa tidak ada bukti yang cukup untuk penolakan dan Anda "melanjutkan" (yaitu, mengumpulkan lebih banyak data, akhiri eksperimen, dll.) Tetapi ketika Anda "benar-benar" menolak hipotesis nol, memberikan beberapa bukti untuk hipotesis alternatif, Anda tidak …

23 hypothesis-testing