Statistik dan Big Data

T&J untuk orang-orang yang tertarik dalam statistik, pembelajaran mesin, analisis data, penambangan data, dan visualisasi data

3
Apa model yang sesuai untuk data jumlah yang tidak terdispersi?
Saya mencoba untuk memodelkan data jumlah dalam R yang tampaknya kurang terdispersi (Dispersion Parameter ~ .40). Ini mungkin mengapa model glmdengan family = poissonatau binomial negatif ( glm.nb) tidak signifikan. Ketika saya melihat deskripsi data saya, saya tidak memiliki kemiringan data hitung yang khas dan residu dalam dua kondisi eksperimental …

3
Peta fitur untuk kernel Gaussian
Dalam SVM, kernel Gaussian didefinisikan sebagai: mana x, y \ in \ mathbb {R ^ n} . Saya tidak tahu persamaan eksplisit \ phi . Saya ingin mengetahuinya.K(x,y)=exp(−∥x−y∥222σ2)=ϕ(x)Tϕ(y)K(x,y)=exp⁡(−‖x−y‖222σ2)=ϕ(x)Tϕ(y)K(x,y)=\exp\left({-\frac{\|x-y\|_2^2}{2\sigma^2}}\right)=\phi(x)^T\phi(y)x,y∈Rnx,y∈Rnx, y\in \mathbb{R^n}ϕϕ\phi Saya juga ingin tahu apakah ∑iciϕ(xi)=ϕ(∑icixi)∑iciϕ(xi)=ϕ(∑icixi)\sum_ic_i\phi(x_i)=\phi \left(\sum_ic_ix_i \right) di mana ci∈Rci∈Rc_i\in \mathbb R . Sekarang, saya pikir itu tidak sama, …


5
Modul Python untuk analisis titik perubahan
Saya mencari modul Python yang melakukan analisis titik-perubahan pada rangkaian waktu. Ada sejumlah algoritma yang berbeda dan saya ingin menjelajahi kemanjuran beberapa dari mereka tanpa harus memutar setiap algoritma. Idealnya saya ingin beberapa modul seperti bcp (Bayesian Change Point) atau paket strucchange di R. Saya berharap menemukan beberapa di Scipy …

4
Bagaimana menentukan kuantil (isoline?) Dari distribusi normal multivariat
Saya tertarik pada bagaimana seseorang dapat menghitung kuantil dari distribusi multivariat. Dalam gambar, saya telah menggambar 5% dan 95% kuantil dari distribusi normal univariat yang diberikan (kiri). Untuk distribusi normal multivariat yang tepat, saya membayangkan analog akan menjadi isoline yang mengelilingi basis fungsi kerapatan. Di bawah ini adalah contoh dari …

6
Pengantar pemodelan persamaan struktural
Saya diminta oleh rekan kerja untuk membantu dalam hal ini, yang saya tidak tahu. Mereka membuat hipotesis tentang peran beberapa variabel laten dalam satu studi, dan wasit meminta mereka untuk memformalkan ini dalam SEM. Karena yang mereka butuhkan sepertinya tidak terlalu sulit, saya pikir saya akan mencobanya ... untuk saat …

3
Tes post hoc setelah ANOVA dengan tindakan berulang menggunakan R
Saya telah melakukan tindakan berulang ANOVA di R, sebagai berikut: aov_velocity = aov(Velocity ~ Material + Error(Subject/(Material)), data=scrd) summary(aov_velocity) Sintaks apa dalam R yang dapat digunakan untuk melakukan tes post hoc setelah ANOVA dengan tindakan berulang? Apakah tes Tukey dengan koreksi Bonferroni sesuai? Jika demikian, bagaimana ini bisa dilakukan dalam …

2
Bisakah Anda menjelaskan estimasi kepadatan jendela Parzen (kernel) dalam istilah awam?
Estimasi kepadatan jendela parzen dijelaskan sebagai p(x)=1n∑i=1n1h2ϕ(xi−xh)p(x)=1n∑i=1n1h2ϕ(xi−xh) p(x)=\frac{1}{n}\sum_{i=1}^{n} \frac{1}{h^2} \phi \left(\frac{x_i - x}{h} \right) di mana adalah sejumlah elemen dalam vektor, x adalah vektor, p ( x ) adalah kerapatan probabilitas x , hnnnxxxp(x)p(x)p(x)xxxhhh adalah dimensi Jendela Parzen, dan adalah fungsi jendela.ϕϕ\phi Pertanyaan saya adalah: Apa perbedaan mendasar antara Fungsi …

3
Apa itu 'koefisien alias'?
Saat membangun model regresi dalam R ( lm), saya sering mendapatkan pesan ini "there are aliased coefficients in the model" Apa sebenarnya artinya? Juga, karena ini predict()juga memberi peringatan. Meskipun ini hanya peringatan, saya ingin tahu bagaimana kita bisa mendeteksi / menghapus koefisien alias sebelum membangun model. Juga, apa konsekuensi …
24 r  regression 


1
F1 / Skor-Dadu vs IoU
Saya bingung tentang perbedaan antara skor F1, skor Dice dan IoU (persimpangan atas persatuan). Sekarang saya mengetahui bahwa F1 dan Dice memiliki arti yang sama (benar?) Dan IoU memiliki formula yang sangat mirip dengan dua lainnya. F1 / Dadu:2 TP2 TP+ FP+ FN2TP2TP+FP+FN\frac{2TP}{2TP+FP+FN} IoU / Jaccard:TPTP+ FP+ FNTPTP+FP+FN\frac{TP}{TP+FP+FN} Adakah perbedaan …

2
Mengapa lambda “dalam satu kesalahan standar dari minimum” adalah nilai yang direkomendasikan untuk lambda dalam regresi jaring elastis?
Saya mengerti apa peran lambda dalam regresi elastis-bersih. Dan saya bisa mengerti mengapa orang akan memilih lambda.min, nilai lambda yang meminimalkan kesalahan divalidasi silang. Pertanyaan saya adalah Di mana dalam literatur statistik direkomendasikan untuk menggunakan lambda.1se, yaitu nilai lambda yang meminimalkan kesalahan CV ditambah satu kesalahan standar ? Sepertinya saya …

2
Apa perbedaan antara dropout dan drop connect?
Apa perbedaan antara dropout dan drop connect? AFAIK, dropout drop secara acak node tersembunyi selama pelatihan tetapi tetap mereka dalam pengujian, dan drop koneksi koneksi drop. Tetapi bukankah menjatuhkan koneksi sama dengan menjatuhkan node yang tersembunyi? Bukankah node (atau koneksi) hanya satu set bobot?

2
Bagaimana cara menginisialisasi elemen-elemen dari matriks filter?
Saya mencoba untuk lebih memahami jaringan saraf convolutional dengan menulis kode Python yang tidak bergantung pada perpustakaan (seperti Convnet atau TensorFlow), dan saya terjebak dalam literatur tentang bagaimana memilih nilai untuk matriks kernel, ketika melakukan lilitan pada suatu gambar. Saya mencoba memahami detail implementasi pada langkah antara fitur peta pada …

3
Berapa probabilitas bahwa dari 25 angka acak antara 1 dan 100, angka tertinggi muncul lebih dari satu kali?
Dalam banyak game online, ketika pemain menyelesaikan tugas yang sulit, kadang-kadang diberikan hadiah khusus yang dapat digunakan oleh semua orang yang menyelesaikan tugas itu. ini biasanya mount (metode transportasi) atau item batil lainnya (item yang tidak meningkatkan kinerja karakter dan terutama digunakan untuk penyesuaian penampilan). Ketika hadiah seperti itu diberikan, …

Dengan menggunakan situs kami, Anda mengakui telah membaca dan memahami Kebijakan Cookie dan Kebijakan Privasi kami.
Licensed under cc by-sa 3.0 with attribution required.