Statistik dan Big Data

My dataset:My dataset:My \ \ dataset: 1:A,B,C,E1:A,B,C,E1: A,B,C,E 2:A,C,D,E2:A,C,D,E2:A,C,D,E 3: B,C,E3: B,C,E3:\ \ \ \ \ B,C,E 4:A,C,D,E4:A,C,D,E4:A,C,D,E 5: C,D,E5: C,D,E5:\ \ \ \ C, D, E 6: A,D,E6: A,D,E6: \ \ \ \ A, D,E Saya ingin mengetahui set item sering maksimal dan set item sering tertutup . Set …

10 data-mining  dataset  association-rules 

Pertanyaan / topik ini muncul dalam diskusi dengan seorang kolega dan saya mencari beberapa pendapat tentang ini: Saya memodelkan beberapa data menggunakan regresi logistik efek acak, lebih tepatnya regresi logistik intersep acak. Untuk efek tetap, saya memiliki 9 variabel yang menarik dan dipertimbangkan. Saya ingin melakukan semacam pemilihan model untuk …

10 mixed-model  model-selection  aic  glmm  stepwise-regression 

Apakah ada definisi yang tepat tentang informasi sebelumnya yang lemah? Apa bedanya dengan subyektif sebelum dengan dukungan luas?

10 bayesian  prior 

Metode kernel sangat efektif dalam banyak tugas klasifikasi yang diawasi. Jadi apa saja batasan metode kernel dan kapan harus menggunakan metode kernel? Terutama di era data skala besar, apa kemajuan metode kernel? Apa perbedaan antara metode kernel dan pembelajaran banyak instance? Jika datanya 500x10000, 500apakah jumlah sampel, dan 10000apakah dimensi …

10 machine-learning  kernel-trick 

Saya telah melakukan percobaan untuk menguji sensitivitas sel terhadap agen kerusakan DNA tertentu. Kami telah menemukan 270 gen yang secara khusus sensitif terhadap obat dan jumlah total gen yang dianalisis adalah 3668. 38 dari 270 gen sensitif diklasifikasikan sebagai "gen perbaikan DNA". Jika jumlah "gen perbaikan DNA" yang terkandung dalam …

10 biostatistics 

Saya telah bekerja dengan logika fuzzy (FL) selama bertahun-tahun dan saya tahu ada perbedaan antara FL dan probabilitas khususnya mengenai cara FL menangani ketidakpastian. Namun, saya ingin bertanya perbedaan apa yang ada antara FL dan probabilitas? Dengan kata lain, jika saya berurusan dengan probabilitas (menggabungkan informasi, mengumpulkan pengetahuan), dapatkah saya …

10 bayes  fuzzy 

Dalam kode berikut ini saya melakukan regresi logistik pada data yang dikelompokkan menggunakan glm dan "dengan tangan" menggunakan mle2. Mengapa fungsi logLik di R memberi saya kemungkinan logLik (fit.glm) = - 2.336 yang berbeda dari yang logLik (fit.ml) = - 5.514 saya dapatkan dengan tangan? library(bbmle) #successes in first column, …

10 r  self-study  generalized-linear-model 

Baru-baru ini saya diperkenalkan dengan koreksi Hommel Hochberg. Saya mencoba menemukan penjelasan sederhana tentang apa ini sebenarnya / tidak, tetapi saya tidak beruntung. Adakah yang bisa tolong berikan deskripsi singkat dan sederhana tentang koreksi Hommel Hochberg?

10 hypothesis-testing  multiple-comparisons  p-value  glmm 

Pertama-tama: Dari apa yang saya mengerti, residu bootstrap bekerja sebagai berikut: Sesuaikan model dengan data Hitung residu Resample residu dan tambahkan ke 1. Sesuaikan model dengan dataset baru dari 3. Ulangi nkali, tetapi selalu tambahkan residu resampled ke fit dari 1. Apakah itu benar sejauh ini? Yang ingin saya lakukan …

10 time-series  matlab  bootstrap  residuals 

Ketika orang menerapkan tes permutasi untuk membandingkan sampel tunggal dengan rata-rata (misalnya, seperti yang Anda lakukan dengan uji-permutasi), bagaimana cara rata-rata ditangani? Saya telah melihat implementasi yang mengambil mean dan sampel untuk tes permutasi, tetapi tidak jelas apa yang sebenarnya mereka lakukan di bawah tenda. Apakah ada cara yang bermakna …

10 t-test  permutation-test 

Kami memiliki sampel N, XiXiX_i , dari distribusi seragam mana tidak diketahui. Perkirakan dari data.[0,θ][0,θ][0,\theta]θθ\thetaθθ\theta Jadi, aturan Bayes ... f(θ|Xi)=f(Xi|θ)f(θ)f(Xi)f(θ|Xi)=f(Xi|θ)f(θ)f(Xi)f(\theta | {X_i}) = \frac{f({X_i}|\theta)f(\theta)}{f({X_i})} dan kemungkinannya adalah: f(Xi|θ)=∏Ni=11θf(Xi|θ)=∏i=1N1θf({X_i}|\theta) = \prod_{i=1}^N \frac{1}{\theta} (edit: ketika untuk semua , dan 0 sebaliknya - terima kasih whuber)0≤Xi≤θ0≤Xi≤θ0 \le X_i \le \thetaiii tetapi tanpa informasi …

10 bayesian  estimation  uniform  uninformative-prior 

Saya mencoba menggunakan SMOTE untuk memperbaiki ketidakseimbangan dalam masalah klasifikasi multi-kelas saya. Meskipun SMOTE bekerja dengan sempurna pada dataset iris sesuai dengan dokumen bantuan SMOTE, ia tidak bekerja pada dataset yang sama. Inilah tampilan data saya. Catatan itu memiliki tiga kelas dengan nilai 1, 2, 3. > data looking risk …

10 r  classification  unbalanced-classes  oversampling 

Masalah saya adalah sebagai berikut: Saya menjatuhkan 40 bola sekaligus dari titik tertentu, beberapa meter di atas lantai. Bola bergulir, dan beristirahat. Menggunakan visi komputer, saya menghitung pusat massa di bidang XY. Saya hanya tertarik pada jarak dari pusat massa ke setiap bola, yang dihitung menggunakan geometri sederhana. Sekarang, saya …

10 normal-distribution  standard-deviation 

Menggunakan bootstrap, saya menghitung nilai p dari tes signifikansi menggunakan dua metode: resampling di bawah hipotesis nol dan menghitung hasil setidaknya paling ekstrim sebagai hasil yang berasal dari data asli resampling di bawah hipotesis alternatif dan menghitung hasil setidaknya sama jauh dari hasil asli sebagai nilai yang sesuai dengan hipotesis …

10 statistical-significance  bootstrap  p-value 

Buku teks pertama menghasilkan beberapa data 2 kelas melalui: pemberian yang mana: dan kemudian ia bertanya: Saya mencoba menyelesaikan ini dengan terlebih dahulu memodelkan ini dengan model grafis ini: di mana adalah label, adalah indeks dari mean yang dipilih , dan adalah titik data. Ini akan membericcch(1≤h≤10)h(1≤h≤10)h\,(1\le h \le 10)mchmhcm_h^cxxx …

10 self-study  bayesian