Statistik dan Big Data

Saya mencoba menghitung mean dan standar deviasi dari 2 persen untuk distribusi lognormal. Saya berhasil melakukan perhitungan untuk distribusi normal menggunakan X = mean + sd * Zdan menyelesaikan untuk mean dan sd. Saya pikir saya kehilangan persamaan ketika saya mencoba melakukan hal yang sama untuk distribusi lognormal. Saya melihat …

11 r  lognormal 

Saya mencari kertas yang saya harap ada, tetapi tidak tahu apakah itu ada. Ini bisa berupa serangkaian studi kasus, dan / atau argumen dari teori probabilitas, tentang mengapa menggunakan data cross-sectional untuk menyimpulkan / memprediksi perubahan longitudinal mungkin merupakan Hal yang Buruk (yaitu tidak selalu demikian, tetapi dapat dilakukan). Saya …

11 references  panel-data  inference  causality  cross-section 

Saya melihat distribusi jumlah kuadrat dari variabel acak T-didistribusikan, dengan eksponen ekor . Di mana X adalah rv, transformasi Fourier untuk , memberi saya solusi untuk kuadrat sebelum konvolusi . αα\alphaX2X2X^2F(t)F(t)\mathscr{F}(t)F(t)nF(t)n\mathscr{F}(t)^nF(t)=∫∞0exp(itx2)⎛⎝⎜⎜⎜(αα+x2)α+12α−−√ B(α2,12)⎞⎠⎟⎟⎟dxF(t)=∫0∞exp⁡(itx2)((αα+x2)α+12α B(α2,12))dx\mathscr{F}(t)=\int_0^{\infty } \exp \left(i\, t\, x^2\right)\left(\frac{\left(\frac{\alpha }{\alpha +x^2}\right)^{\frac{\alpha +1}{2}} }{\sqrt{\alpha }\ B\left(\frac{\alpha }{2},\frac{1}{2}\right)}\right) \, \mathrm{d}x Dengan , solusinya …

11 probability  sums-of-squares 

Latar belakang: Saya harus melakukan analisis data untuk klien (semacam pengacara) yang merupakan pemula mutlak dalam statistik. Dia bertanya kepada saya apa arti istilah "signifikansi statistik" dan saya benar-benar mencoba menjelaskannya ... tetapi karena saya tidak pandai menjelaskan hal-hal yang saya gagal;)

11 statistical-significance  inference  communication 

Untuk non-ahli statistik seperti saya, sangat sulit untuk menangkap ide VImetrik (variasi informasi) bahkan setelah membaca makalah yang relevan oleh Marina Melia " Membandingkan pengelompokan - Jarak berbasis informasi " (Journal of Multivariate Analysis, 2007). Bahkan, saya tidak akrab dengan banyak istilah pengelompokan di luar sana. Di bawah ini adalah …

11 r  clustering  validation  intuition 

Kami memiliki data dengan hasil biner dan beberapa kovariat. Saya menggunakan regresi logistik untuk memodelkan data. Hanya analisis sederhana, tidak ada yang luar biasa. Hasil akhir seharusnya adalah kurva dosis-respons di mana kami menunjukkan bagaimana probabilitas berubah untuk kovariat tertentu. Sesuatu seperti ini: Kami menerima beberapa kritik dari peninjau internal …

11 regression  logistic  generalized-linear-model  binary-data 

Dalam regresi linier sederhana seseorang sering ingin memverifikasi apakah asumsi tertentu dipenuhi untuk dapat melakukan inferensi (misalnya residu terdistribusi normal). Apakah masuk akal untuk memeriksa asumsi dengan memeriksa apakah nilai yang dipasang terdistribusi secara normal?

11 regression  residuals  diagnostic 

Saya telah normal-didistribusikan proses dari mana saya mendapatkan sampel kecil ( n biasanya 10-30) bahwa saya ingin gunakan untuk memperkirakan varians. Tetapi seringkali sampelnya sangat berdekatan sehingga kita tidak dapat mengukur titik individual di dekat pusat. Saya memiliki pemahaman yang samar-samar ini bahwa kita harus dapat membangun penduga yang efisien …

11 normal-distribution  estimation  rayleigh 

Saya memiliki regresi logistik intersep acak (karena pengukuran berulang) dan saya ingin melakukan beberapa diagnostik, khususnya mengenai pencilan dan pengamatan yang berpengaruh. Saya melihat residu untuk melihat apakah ada pengamatan yang menonjol. Tetapi saya juga ingin melihat jarak seperti Cook atau DFFIT. Hosmer dan Lemeshow (2000) mengatakan bahwa karena kurangnya …

11 mixed-model  outliers  glmm  cooks-distance 

Pengingat waktu yang terhormat dalam statistik adalah "tidak berkorelasi tidak menyiratkan independensi". Biasanya pengingat ini dilengkapi dengan pernyataan psikologis yang menenangkan (dan secara ilmiah benar) "ketika, meskipun demikian, kedua variabel tersebut didistribusikan bersama secara normal , maka ketidakterkaitan memang menyiratkan independensi". Saya dapat meningkatkan jumlah pengecualian bahagia dari satu menjadi …

11 probability  distributions  correlation  mathematical-statistics  independence 

Saya menerapkan beberapa data untuk menemukan solusi variabel terbaik dari model regresi menggunakan regresi ridge di R. Saya telah menggunakan lm.ridgedan glmnet(kapan alpha=0), tetapi hasilnya sangat berbeda terutama ketika lambda=0. Itu mengira bahwa kedua penduga parameter memiliki nilai yang sama. Jadi, apa masalahnya di sini? salam Hormat

11 r  regression  ridge-regression  glmnet 

Saya berada di kelas statistik pengantar di mana fungsi kerapatan probabilitas untuk variabel acak kontinu telah didefinisikan sebagai . Saya mengerti bahwa integral tapi saya tidak bisa memperbaikinya dengan intuisi saya tentang variabel acak kontinu. Say X adalah variabel acak yang sama dengan jumlah menit dari waktu t saat kereta …

11 probability  random-variable  pdf  continuous-data 

Sudah diketahui secara umum bahwa memilih tes statistik berdasarkan hasil dari uji statistik lain merupakan masalah, karena nilai-p sulit untuk diinterpretasikan (mis. Memilih tes statistik berdasarkan hasil yang lain (misalnya normalitas) ) . Namun, ini masih praktik standar dalam banyak aplikasi dan biasanya tampaknya tidak diperhatikan atau dibahas dalam makalah …

11 hypothesis-testing  references  p-value 

Dalam model hirarki data mana y ∼ Poisson ( λ ) λ ∼ Gamma ( α , β ) , dalam praktiknya biasanya memilih nilai-nilai ( α , β ) sedemikian rupa sehingga rata-rata dan varian distribusi gamma kira-kira sama dengan rerata dan ragam data y (mis., Clayton dan Kaldor, …

11 poisson-distribution  gamma-distribution  hierarchical-bayesian  hyperparameter 

Saya bertanya-tanya apakah interval prediksi dan interval kredibel mengevaluasi hal yang sama. Misalnya dengan regresi linier, ketika Anda memperkirakan interval prediksi dari nilai yang dipasang, Anda memperkirakan batas interval di mana Anda mengharapkan nilai Anda turun. Sebaliknya ke interval kepercayaan, Anda tidak fokus pada parameter distribusi seperti nilai rata-rata, tetapi …

11 bayesian  linear-model  prediction  prediction-interval  credible-interval