Statistik dan Big Data

T&J untuk orang-orang yang tertarik dalam statistik, pembelajaran mesin, analisis data, penambangan data, dan visualisasi data

1
Penggunaan DNA dalam kasus-kasus pengadilan
Saat ini saya sedang mempelajari kasus Neil Owen berikut, berdasarkan artikel berikut yang saya temukan di sebuah surat kabar: "Seorang siswa berusia 20 tahun dipenjara seumur hidup kemarin karena pemerkosaan brutal dan pembunuhan seorang siswi, setelah salah satu program pengujian DNA terbesar dalam sejarah kriminal Inggris. Neil Owen ditangkap setahun …

1
SVD dari matriks data (PCA) setelah dihaluskan
Katakanlah saya memiliki matriks data terpusat dengan SVD .n×mn×mn \times mAAAA=UΣVTA=UΣVTA = U \Sigma V^{T} Misalnya, kolom (pengukuran) yang spektra dengan frekuensi yang berbeda. Matriks dipusatkan sehingga baris-baris matriks dikurangi rata-ratanya. Ini untuk menafsirkan vektor singular kiri sebagai komponen utama.m=50m=50m=50n=100n=100n=100 Saya tertarik memahami bagaimana perubahan SVD ketika saya memuluskan setiap …
8 pca  smoothing  svd 


4
Versi fleksibel dari regresi logistik
Saya mencoba menyesuaikan regresi logistik di mana ada perbedaan besar dalam jumlah poin data di kedua kelompok (70 Vs 10.000). Seorang teman ahli statistik saya mengatakan kepada saya bahwa ini adalah masalah yang diketahui dengan regresi logistik dan bahwa untuk angka-angka itu cocok dengan data dan pada dasarnya tidak berfungsi. …






4
Menemukan pencilan tanpa mengasumsikan distribusi normal
Saya memiliki kumpulan data berukuran 40-50 poin. Tanpa berasumsi bahwa data terdistribusi normal, saya ingin mencari tahu outlier dengan kepercayaan setidaknya 90%. Saya pikir boxplot bisa menjadi cara yang baik untuk melakukan itu tetapi saya tidak yakin. Setiap bantuan dihargai. Juga dengan implementasi boxplot saya tidak dapat menemukan implementasi yang …

3
Asimtot regresi binomial
Regresi logistik binomial memiliki asimtot atas dan bawah masing-masing 1 dan 0. Namun, data akurasi (hanya sebagai contoh) mungkin memiliki asimtot atas dan bawah yang sangat berbeda dengan 1 dan / atau 0. Saya dapat melihat tiga solusi potensial untuk ini: Jangan khawatir tentang hal itu jika Anda mendapatkan pasangan …

1
Perkiraan distribusi Poisson yang kuat
Saya memiliki satu set angka yang dianggap berasal dari distribusi Poisson. Himpunan memiliki beberapa pencilan juga dan karena itu, perkiraan kemungkinan maksimum sangat terpengaruh. Saya mendengar bahwa prosedur estimasi yang kuat dapat membantu dalam situasi seperti itu. Adakah yang bisa menjelaskan cara melakukan ini? Saya bukan mahasiswa statistik. Saya menemukan …

1
Melacak asumsi yang dibuat oleh fungsi ttest_ind () SciPy
Saya mencoba untuk menulis kode Python saya sendiri untuk menghitung t-statistik dan nilai-p untuk satu dan dua uji t independen. Saya dapat menggunakan perkiraan normal, tetapi untuk saat ini saya hanya mencoba menggunakan distribusi-t. Saya tidak berhasil dalam mencocokkan hasil perpustakaan statistik SciPy pada data pengujian saya. Saya bisa menggunakan …


3
Mendukung regresi vektor pada data miring / kurtosis tinggi
Saya menggunakan dukungan vektor regresi untuk memodelkan beberapa data yang cukup miring (dengan kurtosis tinggi). Saya sudah mencoba memodelkan data secara langsung tetapi saya mendapatkan prediksi yang salah, saya pikir terutama karena distribusi data, yang condong ke kanan dengan ekor yang sangat gemuk. Saya cukup yakin beberapa outlier (yang merupakan …

Dengan menggunakan situs kami, Anda mengakui telah membaca dan memahami Kebijakan Cookie dan Kebijakan Privasi kami.
Licensed under cc by-sa 3.0 with attribution required.