Statistik dan Big Data

Dalam pemodelan persamaan struktural dengan variabel laten (SEM), formulasi model umum adalah "Indikator Multi, Faktor Penyebab" (MIMIC) di mana variabel laten disebabkan oleh beberapa variabel dan tercermin oleh variabel lain. Berikut ini contoh sederhana: Pada dasarnya, f1adalah hasil regresi untuk x1, x2dan x3, dan y1, y2dan y3merupakan indikator pengukuran untuk …

10 sem  latent-variable  lavaan 

Dalam literatur pembelajaran mesin, untuk mewakili distribusi probabilitas, fungsi softmax sering digunakan. Apakah ada alasan untuk ini? Mengapa fungsi lain tidak digunakan?

10 machine-learning  distributions  softmax 

\newcommand{\P}{\mathbb{P}} Saya melemparkan dadu yang adil. Setiap kali saya mendapat 1, 2, atau 3, saya menuliskan '1'; setiap kali saya mendapatkan 4 saya menuliskan '2'; setiap kali saya mendapatkan angka 5 atau 6, saya menuliskan angka '3.' Biarkan menjadi jumlah total lemparan yang saya butuhkan untuk produk dari semua angka …

10 probability  normal-distribution  conditional-probability  multinomial  distributions 

Dari judul saya ingin tahu apakah ada tes statistik yang dapat membantu saya untuk mengidentifikasi perbedaan yang signifikan antara dua seri waktu yang sama. Secara khusus, melihat gambar di bawah ini, saya ingin mendeteksi bahwa seri mulai menyimpang pada waktu t1, yaitu ketika perbedaan di antara mereka mulai menjadi signifikan. …

10 time-series  statistical-significance  variance  convergence  trend 

Misalkan menjadi sampel variabel acak eksponensial iid dengan mean , dan misalkan menjadi statistik pesanan dari sampel ini. Biarkan .X1, ... , XnX1,...,XnX_1,\dots,X_nββ\betaX( 1 ), ... , X( n )X(1),...,X(n)X_{(1)},\dots,X_{(n)}X¯=1n∑ni=1XiX¯=1n∑saya=1nXsaya\bar X = \frac{1}{n}\sum_{i=1}^n X_i Tentukan jarakDapat ditunjukkan bahwa setiap juga eksponensial, dengan rata-rata .Wi=X(i+1)−X(i) ∀ 1≤i≤n−1.Wsaya=X(saya+1)-X(saya) ∀ 1≤saya≤n-1.W_i=X_{(i+1)}-X_{(i)}\ \forall\ 1 …

10 probability  distributions  exponential  order-statistics 

Dalam fisika atau mekanika matematika, mulai dari posisi berbasis waktu , seseorang memperoleh tingkat perubahan melalui turunan sehubungan dengan waktu: kecepatan, akselerasi, brengsek (urutan 3), bergabung (urutan 4).x(t)x(t)x(t) Beberapa telah mengusulkan snap, crackle, pop untuk turunan hingga urutan ketujuh. Momen, yang diilhami dari fisika mekanis dan teori elastisitas, juga penting …

10 distributions  terminology  moments  notation  history 

Saya menemukan derivasi ini yang saya tidak mengerti: Jika adalah sampel acak ukuran n yang diambil dari populasi mean dan varians , makaX1,X2,...,XnX1,X2,...,XnX_1, X_2, ..., X_nμμ\muσ2σ2\sigma^2 X¯=(X1+X2+...+Xn)/nX¯=(X1+X2+...+Xn)/n\bar{X} = (X_1 + X_2 + ... + X_n)/n E(X¯)=E(X1+X2+...+Xn)/n=(1/n)(E(X1)+E(X2)+...+E(Xn))E(X¯)=E(X1+X2+...+Xn)/n=(1/n)(E(X1)+E(X2)+...+E(Xn))E(\bar{X}) = E(X_1 + X_2 + ... + X_n)/n = (1/n)(E(X_1) + E(X_2) + ... …

10 random-variable  expected-value  mean  iid 

Sebagai bagian dari posting ini , saya bekerja pada simulasi data dengan variabel kontinu, meminjamkan diri untuk intersep dan lereng berkorelasi. Meskipun ada posting bagus tentang topik ini di situs , dan di luar situs , saya mengalami kesulitan dalam menemukan contoh awal-ke-akhir dengan data simulasi yang paralel dengan skenario …

10 regression  mixed-model  lme4-nlme 

Saya melakukan penelitian tentang game edukasi, dan beberapa proyek saya saat ini melibatkan menggunakan data dari BoardGameGeek ( BGG ) dan VideoGameGeek (VGG) untuk menguji hubungan antara elemen desain game (yaitu, "diatur dalam Perang Dunia II", "melibatkan rolling dadu" ) dan peringkat pemain dari game-game tersebut (yaitu skor dari 10). …

10 r  categorical-data  factor-analysis  binary-data 

Jika Standar Normal PDF adalah f(x)=12π−−√e−x2/2f(x)=12πe−x2/2f(x) = \frac{1}{\sqrt{2\pi}} e^{-x^2/2} dan CDF adalah F(x)=12π−−√∫x−∞e−x2/2dx,F(x)=12π∫−∞xe−x2/2dx,F(x) = \frac{1}{\sqrt{2\pi}} \int_{-\infty}^x e^{-x^2/2}\mathrm{d}x\,, bagaimana ini berubah menjadi fungsi kesalahan ?zzz

10 normal-distribution  cdf 

Saya menulis sebuah makalah yang menggunakan asimptotik pengisi dan salah satu pengulas saya meminta saya untuk memberikan definisi matematis yang tepat tentang apa asimptotik pengisi (yaitu, dengan simbol dan notasi matematika). Saya tidak dapat menemukan apa pun dalam literatur dan berharap seseorang dapat mengarahkan saya ke arah beberapa orang atau …

10 asymptotics  definition 

Baru-baru ini, saya menjadi tertarik pada model susun sebagai bentuk pembelajaran ansambel. Secara khusus, saya telah bereksperimen sedikit dengan beberapa dataset mainan untuk masalah regresi. Saya pada dasarnya telah mengimplementasikan individual "level 0" regressor, menyimpan prediksi output masing-masing regressor sebagai fitur baru untuk "meta-regressor" sebagai inputnya, dan menyesuaikan meta-regressor ini …

10 machine-learning  ensemble  stacking 

Saya membaca contoh yang diberikan dalam buku, Machine Learning for Hackers . Pertama saya akan menguraikan contoh dan kemudian berbicara tentang pertanyaan saya. Contoh : Mengambil dataset selama 10 tahun dari 25 harga saham. Menjalankan PCA dengan harga 25 saham. Membandingkan komponen utama dengan Dow Jones Index. Mengamati kesamaan yang …

10 time-series  pca  references  covariance  stationarity 

Dalam berbagai sumber (lihat misalnya di sini ), rumus berikut ini diberikan untuk interval kepercayaan untuk median (terutama untuk tujuan menggambar takik pada plot kotak dan kumis): 95% CImedian=Median±1.57×IQRN−−√95% CImedian=Median±1.57×IQRN 95\%\ CI_{\rm median} = {\rm Median} \pm \frac{1.57\times IQR}{\sqrt{N}} Konstanta ajaib membuatku gila, aku tidak tahu bagaimana itu diperoleh. Berbagai …

10 confidence-interval  median  boxplot  interquartile 

SSS beberapa set dengann∈Nn∈Nn\in\mathbb{N} elemen, dana1,a2,...,ama1,a2,...,ama_1,a_2,...,a_m tetap bilangan bulat positif kurang dari atau sama dengannnn . Dengan unsur-unsur SSS yang sama mungkin, mmm sampel L1,L2,...,LmL1,L2,...,LmL_1, L_2,...,L_m secara terpisah dan independen yang diambil dari SSS tanpa penggantian, ukuran yang a1,a2,...,ama1,a2,...,ama_1,a_2,...,a_m , masing-masing. |L1∩L2∩ ... ∩Lm||L1∩L2∩ ... ∩Lm|\left|L_1\cap L_2\cap\ ...\ \cap L_m\right|{0,1,...,min{a1,a2,...,am}}{0,1,...,min{a1,a2,...,am}}\{0,1,...,\min\{a_1,a_2,...,a_m\}\}

10 combinatorics