Statistik dan Big Data

Apakah ada buku teks statistik gratis yang tersedia?

119 teaching  references 

Di tempat kerja kami membahas hal ini karena bos saya belum pernah mendengar tentang normalisasi. Dalam Aljabar Linier, Normalisasi tampaknya merujuk pada pembagian vektor dengan panjangnya. Dan dalam statistik, Standardisasi tampaknya merujuk pada pengurangan mean yang kemudian dibagi dengan SD-nya. Tapi mereka juga bisa dipertukarkan dengan kemungkinan lain. Saat membuat …

118 descriptive-statistics  normalization  standardization 

Korelasi tidak menyiratkan sebab-akibat, karena mungkin ada banyak penjelasan untuk korelasi. Tetapi apakah sebab akibat menyiratkan korelasi? Secara intuitif, saya akan berpikir bahwa kehadiran sebab-akibat berarti ada beberapa korelasi. Tetapi intuisi saya tidak selalu membantu saya dengan baik dalam statistik. Apakah sebab akibat menyiratkan korelasi?

118 correlation  causality 

Saya menjalankan model regresi linier dan bertanya-tanya apa kondisinya untuk menghapus istilah intersep. Dalam membandingkan hasil dari dua regresi berbeda di mana satu memiliki intersep dan yang lainnya tidak, saya perhatikan bahwa fungsi tanpa intersep jauh lebih tinggi. Apakah ada kondisi atau asumsi tertentu yang harus saya ikuti untuk memastikan …

118 regression  linear-model  r-squared  intercept 

Saya mencoba untuk mendapatkan pemahaman yang baik tentang algoritma EM, untuk dapat mengimplementasikan dan menggunakannya. Saya menghabiskan satu hari penuh membaca teori dan kertas di mana EM digunakan untuk melacak pesawat menggunakan informasi posisi yang berasal dari radar. Sejujurnya, saya pikir saya tidak sepenuhnya memahami ide yang mendasarinya. Adakah yang …

117 regression  probability  mathematical-statistics  intuition  expectation-maximization 

Apa perbedaan antara probabilitas dan statistik, dan mengapa mereka dipelajari bersama?

116 probability  teaching  mathematical-statistics 

Baru-baru ini, saya menemukan di sebuah makalah oleh Klammer, et al. pernyataan bahwa nilai-p harus didistribusikan secara seragam. Saya percaya pada penulis, tetapi tidak bisa mengerti mengapa demikian. Klammer, AA, Park, CY, dan Stafford Noble, W. (2009) Kalibrasi Statistik Fungsi SEQUEST XCorr . Jurnal Penelitian Proteome . 8 (4): 2106–2113.

115 p-value  uniform 

Ini awalnya muncul sehubungan dengan beberapa pekerjaan yang kami lakukan pada model untuk mengklasifikasikan teks alami, tapi saya sudah menyederhanakannya ... Mungkin terlalu banyak. Anda memiliki mobil biru (berdasarkan ukuran ilmiah obyektif - biru). Anda menunjukkannya kepada 1000 orang. 900 mengatakan itu biru. 100 tidak. Anda memberikan informasi ini kepada …

114 probability 

Untuk pemahaman saya sendiri, saya tertarik untuk secara manual mereplikasi perhitungan kesalahan standar estimasi koefisien sebagai, misalnya, datang dengan output dari lm()fungsi R, tetapi belum dapat menjabarkannya. Apa formula / implementasi yang digunakan?

114 r  regression  standard-error  lm 

Kami memiliki vektor normal multivariat . Pertimbangkan mempartisi \ boldsymbol \ mu dan {\ boldsymbol Y} menjadi \ boldsymbol \ mu = \ begin {bmatrix} \ boldsymbol \ mu_1 \\ \ boldsymbol \ mu_2 \ end {bmatrix} {\ boldsymbol Y} = \ begin {bmatrix} { \ boldsymbol y} _1 \\ …

114 normal-distribution  conditional-probability 

Saya belum melihat pertanyaan yang dinyatakan secara tepat dalam istilah ini, dan inilah mengapa saya membuat pertanyaan baru. Apa yang saya tertarik ketahui bukanlah definisi jaringan saraf, tetapi memahami perbedaan yang sebenarnya dengan jaringan saraf yang mendalam. Untuk lebih banyak konteks: Saya tahu apa itu jaringan syaraf dan bagaimana backpropagation …

114 neural-networks  deep-learning 

Komik xkcd ini (Frequentists vs Bayesians) mengolok-olok seorang ahli statistik yang sering mendapatkan hasil yang jelas salah. Namun bagi saya nampaknya penalarannya benar dalam arti mengikuti metodologi frequentist standar. Jadi pertanyaan saya adalah "apakah dia menerapkan metodologi frequentist dengan benar?" Jika tidak: apa yang akan menjadi kesimpulan sering yang benar …

113 bayesian  frequentist 

Saya mendapatkan pertanyaan ini cukup sering dalam pekerjaan konsultasi statistik saya, yang saya pikir akan saya posting di sini. Saya punya jawaban, yang diposting di bawah, tetapi saya ingin mendengar apa yang orang lain katakan. Pertanyaan: Jika Anda memiliki dua variabel yang tidak terdistribusi normal, haruskah Anda menggunakan Spearman rho …

113 correlation  normality-assumption  pearson-r  spearman-rho 

Analisis komponen utama (PCA) dapat digunakan untuk pengurangan dimensi. Setelah pengurangan dimensi seperti itu dilakukan, bagaimana kira-kira orang dapat merekonstruksi variabel / fitur asli dari sejumlah kecil komponen utama? Atau, bagaimana seseorang dapat menghapus atau membuang beberapa komponen utama dari data? Dengan kata lain, bagaimana cara membalikkan PCA? Mengingat bahwa …

113 pca  dimensionality-reduction  svd 

Karena saya menemukan mereka menarik, saya ingin mendengar apa yang orang-orang di komunitas ini temukan sebagai paradoks statistik paling menarik dan mengapa.

112 paradox