Statistik dan Big Data

T&J untuk orang-orang yang tertarik dalam statistik, pembelajaran mesin, analisis data, penambangan data, dan visualisasi data



4
Apa yang salah dengan t-SNE vs PCA untuk pengurangan dimensi menggunakan R?
Saya memiliki matriks 336x256 angka titik apung (336 genom bakteri (kolom) x 256 frekuensi tetranukleotida yang dinormalisasi (baris), misalnya setiap kolom menambahkan hingga 1). Saya mendapatkan hasil yang bagus ketika saya menjalankan analisis saya menggunakan analisis komponen utama. Pertama-tama saya menghitung kluster kmeans pada data, kemudian menjalankan PCA dan mewarnai …
27 r  pca  tsne 


4
Jebakan dalam desain eksperimental: Menghindari eksperimen mati
Saya telah menemukan kutipan ini beberapa kali: Untuk berkonsultasi dengan ahli statistik setelah percobaan selesai seringkali hanya memintanya untuk melakukan pemeriksaan post mortem. Dia mungkin bisa mengatakan eksperimen apa yang mati. - Ronald Fisher (1938) Bagi saya, sepertinya agak sombong. Satu-satunya contoh yang pernah saya temukan menggambarkan bagaimana eksperimen mati …

17
Bagaimana cara menggambarkan statistik dalam satu kalimat?
Ketika saya pertama kali mulai belajar statistik, prosedur seperti uji-t, ANOVA, chi-square dan regresi linier masing-masing tampaknya makhluk yang sangat berbeda. Tetapi sekarang saya menyadari prosedur ini masing-masing melakukan kurang lebih hal yang sama. Dan juga, nilai-nilai seperti varians, residual, standard error dan mean juga mengukur kurang lebih hal yang …
27 definition 



2
Bagaimana cara membangun interval kepercayaan 95% dari perbedaan antara median?
Masalah saya: uji coba acak kelompok paralel memiliki distribusi hasil primer yang sangat miring. Saya tidak ingin menganggap normalitas dan menggunakan 95% CI berbasis normal (yaitu menggunakan 1,96 X SE). Saya merasa nyaman mengekspresikan ukuran kecenderungan sentral sebagai median, tetapi pertanyaan saya adalah bagaimana membangun 95% CI dari perbedaan median …

2
Dalam model multi-level, apa implikasi praktis dari memperkirakan dan tidak mengestimasi parameter korelasi efek acak?
Dalam model multi-level, apa implikasi praktis dan terkait interpretasi parameter estimasi efek korelasi acak dan tidak diperkirakan? Alasan praktis untuk menanyakan hal ini adalah bahwa dalam kerangka lmer dalam R, tidak ada metode yang diimplementasikan untuk memperkirakan nilai-p melalui teknik MCMC ketika estimasi dibuat dalam model korelasi antara parameter. Misalnya, …


4
Ukuran sampel minimum untuk PCA atau FA ketika tujuan utamanya adalah memperkirakan hanya beberapa komponen?
Jika saya memiliki dataset dengan pengamatan dan variabel (dimensi), dan umumnya kecil ( ), dan dapat berkisar dari kecil ( ) hingga mungkin jauh lebih besar ( ).nnnpppnnnn=12−16n=12−16n=12-16pppp=4−10p=4−10p = 4-10p=30−50p=30−50p= 30-50 Saya ingat belajar bahwa harus jauh lebih besar dari untuk menjalankan analisis komponen utama (PCA) atau analisis faktor (FA), …

3
Apa yang menyebabkan diskontinuitas dalam distribusi nilai-p yang dipublikasikan pada p <0,05?
Dalam sebuah makalah baru-baru ini , Masicampo dan Lalande (ML) mengumpulkan sejumlah besar nilai-p yang diterbitkan dalam banyak studi berbeda. Mereka mengamati lompatan aneh dalam histogram dari nilai-p tepat pada tingkat kritis kanonik 5%. Ada diskusi yang bagus tentang Fenomena ML ini di blog Prof. Wasserman: http://normaldeviate.wordpress.com/2012/08/16/p-values-gone-wild-and-multiscale-madness/ Di blog-nya, Anda …

1
Derajat kebebasan residual yang sesuai setelah menjatuhkan persyaratan dari suatu model
Saya merenungkan diskusi seputar pertanyaan ini dan khususnya komentar Frank Harrell bahwa estimasi untuk varians dalam model yang dikurangi (yaitu satu dari mana sejumlah variabel penjelas telah diuji dan ditolak) harus menggunakan Tingkat Kemerdekaan Umum Ye . Profesor Harrell menunjukkan ini akan jauh lebih dekat dengan derajat sisa kebebasan dari …

7
Apakah korelasi setara dengan asosiasi?
Profesor statistik saya mengklaim bahwa kata "korelasi" berlaku ketat untuk hubungan linier antarvariate, sedangkan kata "asosiasi" berlaku luas untuk semua jenis hubungan. Dengan kata lain, dia mengklaim istilah "korelasi non-linear" adalah sebuah oxymoron. Dari apa yang saya dapat dari bagian ini dalam artikel Wikipedia tentang " Korelasi dan ketergantungan ", …

Dengan menggunakan situs kami, Anda mengakui telah membaca dan memahami Kebijakan Cookie dan Kebijakan Privasi kami.
Licensed under cc by-sa 3.0 with attribution required.