Statistik dan Big Data

Dalam banyak makalah yang mempertimbangkan perawatan dan hasil, saya melihat tabel (biasanya "tabel 1") dari apa yang dapat disebut variabel gangguan (sering demografi, kadang-kadang kondisi medis) dengan tes signifikansi dan teks seperti "kelompok-kelompok yang secara umum mirip, ada tidak ada perbedaan signifikan di XXXXX, lihat Tabel ". Jadi tujuan yang …

13 equivalence  controlling-for-a-variable 

Jika semua yang Anda lakukan adalah pengambilan sampel ulang dari distribusi empiris, mengapa tidak hanya mempelajari distribusi empiris? Sebagai contoh alih-alih mempelajari variabilitas dengan pengambilan sampel berulang, mengapa tidak hanya mengukur variabilitas dari distribusi empiris?

13 machine-learning  mathematical-statistics  sampling  bootstrap  resampling 

Apa itu Bayesian Deep Learning dan bagaimana hubungannya dengan statistik Bayesian tradisional dan Deep Learning tradisional? Apa konsep dan matematika utama yang terlibat? Bisakah saya mengatakan itu hanya statistik bayesian non parametrik? Apa karya seminalnya serta perkembangan dan aplikasi utamanya saat ini? PS: Bayesian Deep Learning mendapat banyak perhatian, lihat …

13 bayesian  deep-learning 

Saya menggunakan skrip. Ini untuk catatan inti. Saya memiliki kerangka data yang menunjukkan komposisi unsur yang berbeda di dalam kolom di atas kedalaman tertentu (di kolom pertama). Saya ingin melakukan PCA dengannya dan saya bingung tentang metode standardisasi yang harus saya pilih. Apakah ada di antara Anda yang menggunakan clr()untuk …

13 r  pca  normalization  compositional-data 

Apakah ada distribusi atau dapatkah saya bekerja dari distribusi lain untuk membuat distribusi seperti itu pada gambar di bawah (permintaan maaf untuk gambar yang buruk)? di mana saya memberikan angka (0,2, 0,5 dan 0,9 dalam contoh) untuk di mana puncak seharusnya dan standar deviasi (sigma) yang membuat fungsi lebih lebar …

13 distributions  normal-distribution 

Biarkan dan menjadi empat variabel acak sehingga , di mana adalah parameter yang tidak diketahui. Juga asumsikan bahwa ,Lalu yang mana yang benar?θ 1 , θ 2 , θ 3 V a r ( Y i ) = σ 2 i = 1 , 2 , 3 , 4.Y1,Y2,Y3Y1,Y2,Y3Y_1,Y_2,Y_3Y4Y4Y_4E(Y1)=θ1−θ3; E(Y2)=θ1+θ2−θ3; …

13 self-study  estimation  inference 

Satu ukuran umum yang digunakan untuk membandingkan dua atau lebih model klasifikasi adalah dengan menggunakan area di bawah kurva ROC (AUC) sebagai cara untuk secara tidak langsung menilai kinerjanya. Dalam hal ini model dengan AUC yang lebih besar biasanya diartikan sebagai berkinerja lebih baik daripada model dengan AUC yang lebih …

13 machine-learning  classification  roc  auc  model-evaluation 

Akhir-akhir ini, saya harus membaca beberapa makalah di bidang ekonomi (bidang yang saya tidak terlalu kenal). Satu hal yang saya perhatikan adalah bahwa bahkan ketika variabel responnya biner, model regresi linier yang dipasang menggunakan OLS ada di mana-mana. Karena itu pertanyaan saya adalah: Mengapa regresi linier lebih disukai daripada misalnya …

13 regression  logistic  econometrics 

Kami sedang berurusan dengan distribusi lognormal dalam kursus keuangan dan buku teks saya hanya menyatakan bahwa ini benar, yang menurut saya agak frustasi karena latar belakang matematika saya tidak terlalu kuat tetapi saya ingin intuisi. Adakah yang bisa menunjukkan mengapa ini terjadi?

13 distributions  expected-value  lognormal 

Douglas Bates menyatakan bahwa model-model berikut ini setara "jika matriks varians-kovarians untuk efek acak bernilai vektor memiliki bentuk khusus, yang disebut simetri gabungan" ( slide 91 dalam presentasi ini ): m1 <- lmer(y ~ factor + (0 + factor|group), data) m2 <- lmer(y ~ factor + (1|group) + (1|group:factor), data) …

13 r  anova  mixed-model  repeated-measures  lme4-nlme 

Saya membaca pertanyaan ini mengenai regresi skala besar ( tautan ) di mana whuber menunjukkan poin yang menarik sebagai berikut: "Hampir semua uji statistik yang Anda jalankan akan sangat kuat sehingga hampir pasti untuk mengidentifikasi efek" signifikan ". Anda harus lebih fokus pada kepentingan statistik, seperti ukuran efek, daripada signifikansi." …

13 regression  statistical-significance 

Saya ingin tahu berapa banyak pembelajaran mesin membutuhkan optimasi. Dari apa yang saya dengar statistik adalah topik matematika yang penting bagi orang yang bekerja dengan pembelajaran mesin. Demikian pula seberapa pentingkah bagi seseorang yang bekerja dengan pembelajaran mesin untuk belajar tentang optimasi cembung atau non-cembung?

13 machine-learning  optimization 

Tutup. Pertanyaan ini di luar topik . Saat ini tidak menerima jawaban. Ingin meningkatkan pertanyaan ini? Perbarui pertanyaan sehingga sesuai topik untuk Cross Validated. Ditutup 2 tahun yang lalu . Baris ini mengembalikan 4 baris pertama dalam kerangka data combineduntukfeature_a combined.iloc[0:4]["feature_a"] Seperti yang diharapkan, baris berikutnya ini mengembalikan baris 2, …

13 python  pandas 

Saya bingung antara dua istilah "fungsi yang menghasilkan probabilitas" dan "fungsi yang menghasilkan momen." Bagaimana perbedaan istilah-istilah itu?

13 probability  distributions  terminology  intuition  mgf 

Saya merasa sangat bodoh bahkan mengajukan pertanyaan mendasar seperti itu tetapi begini: Jika saya memiliki variabel acak yang dapat mengambil nilai dan , dengan dan , maka jika saya menarik sampel dari itu, saya akan mendapatkan distribusi binomial.XXX000111P(X=1)=pP(X=1)=pP(X=1) = pP(X=0)=1−pP(X=0)=1−pP(X=0) = 1-pnnn Mean dari distribusi adalah μ=np=E(X)μ=np=E(X)\mu = np = …

13 variance  binomial