Pertanyaan yang diberi tag «multiple-comparisons»

Kita tahu bahwa kita harus menerapkan koreksi seperti Benjamini Hochberg untuk pengujian hipotesis berganda untuk eksperimen yang didasarkan pada satu set data tunggal, untuk mengendalikan laju penemuan palsu, jika tidak semua eksperimen yang memberikan hasil positif bisa salah. Tapi mengapa kita tidak menerapkan prinsip yang sama ini untuk semua percobaan …

24 hypothesis-testing  multiple-comparisons  bonferroni  false-discovery-rate 

Saya memiliki nilai p dari banyak tes dan ingin tahu apakah sebenarnya ada sesuatu yang signifikan setelah mengoreksi beberapa pengujian. Komplikasinya: tes saya tidak independen. Metode yang saya pikirkan (varian dari Fisher's Product Method, Zaykin et al., Genet Epidemiol , 2002) membutuhkan korelasi antara nilai-nilai p. Untuk memperkirakan korelasi ini, …

24 correlation  multiple-comparisons  statistical-significance  genetics 

Saya membaca makalah berikut: Perneger (1998) Apa yang salah dengan penyesuaian Bonferroni . Penulis merangkum dengan mengatakan bahwa penyesuaian Bonferroni memiliki, paling-paling, aplikasi terbatas dalam penelitian biomedis dan tidak boleh digunakan ketika menilai bukti tentang hipotesis spesifik: Poin ringkasan: Menyesuaikan signifikansi statistik untuk jumlah tes yang telah dilakukan pada data …

23 hypothesis-testing  multiple-comparisons  bonferroni 

Saya menggunakan JMP untuk memeriksa perbedaan tutupan vegetasi dalam kelompok bentuk pertumbuhan (pohon, semak, forb, dll.) Sebelum dan sesudah tiga perlakuan dengan kontrol. Ukuran sampel saya kecil (n = 5) dan sebagian besar distribusi saya tidak terdistribusi normal. Untuk distribusi normal saya menggunakan ANOVA untuk menganalisis perbedaan (perubahan persen) antara …

23 multiple-comparisons  nonparametric  tukey-hsd 

Andrew Gelman menulis artikel yang luas tentang mengapa pengujian Bayesian AB tidak memerlukan beberapa koreksi hipotesis: Mengapa Kita (Biasanya) Tidak Perlu Khawatir Tentang Multiple Comparisons , 2012. Saya tidak begitu mengerti: mengapa metode Bayesian tidak membutuhkan banyak koreksi pengujian? A ~ Distribution1 + Common Distribution B ~ Distribution2 + Common …

22 hypothesis-testing  bayesian  multiple-comparisons 

Saya melakukan uji statistik independen dengan hipotesis nol yang sama, dan ingin menggabungkan hasilnya menjadi satuNNN nilai. Tampaknya ada dua metode yang "diterima": metodeFisher dan metode Stouffer.ppp Pertanyaan saya adalah tentang metode Stouffer. Untuk setiap tes terpisah saya mendapatkan z-score . Di bawah hipotesis nol, masing-masing didistribusikan dengan distribusi normal …

22 hypothesis-testing  chi-squared  p-value  multiple-comparisons  combining-p-values 

Ketika kami melakukan percobaan (pada ukuran sampel kecil (biasanya ukuran sampel per kelompok perlakuan sekitar 7 ~ 8)) pada dua kelompok, kami menggunakan uji-t untuk menguji perbedaan. Namun, ketika kami melakukan ANOVA (jelas untuk lebih dari dua kelompok), kami menggunakan sesuatu di sepanjang garis Bonferroni (LSD / # perbandingan berpasangan) …

22 anova  multiple-comparisons  post-hoc  bonferroni  fishers-lsd 

Saya punya dua pertanyaan tentang kapan harus menggunakan penyesuaian Bonferroni: Apakah pantas menggunakan penyesuaian Bonferroni dalam semua kasus pengujian berganda? Jika seseorang melakukan tes pada set data, maka seseorang membagi data itu set ke tingkat yang lebih baik (misalnya membagi data berdasarkan gender) dan melakukan tes yang sama, bagaimana hal …

21 multiple-comparisons  bonferroni  type-i-and-ii-errors 

Setelah melakukan analisis komponen utama (PCA), saya ingin memproyeksikan vektor baru ke ruang PCA (yaitu menemukan koordinatnya dalam sistem koordinat PCA). Saya telah menghitung PCA dalam bahasa R menggunakan prcomp. Sekarang saya harus bisa mengalikan vektor saya dengan matriks rotasi PCA. Haruskah komponen utama dalam matriks ini disusun dalam baris …

21 r  pca  r  variance  heteroscedasticity  misspecification  distributions  time-series  data-visualization  modeling  histogram  kolmogorov-smirnov  negative-binomial  likelihood-ratio  econometrics  panel-data  categorical-data  scales  survey  distributions  pdf  histogram  correlation  algorithms  r  gpu  parallel-computing  approximation  mean  median  references  sample-size  normality-assumption  central-limit-theorem  rule-of-thumb  confidence-interval  estimation  mixed-model  psychometrics  random-effects-model  hypothesis-testing  sample-size  dataset  large-data  regression  standard-deviation  variance  approximation  hypothesis-testing  variance  central-limit-theorem  kernel-trick  kernel-smoothing  error  sampling  hypothesis-testing  normality-assumption  philosophical  confidence-interval  modeling  model-selection  experiment-design  hypothesis-testing  statistical-significance  power  asymptotics  information-retrieval  anova  multiple-comparisons  ancova  classification  clustering  factor-analysis  psychometrics  r  sampling  expectation-maximization  markov-process  r  data-visualization  correlation  regression  statistical-significance  degrees-of-freedom  experiment-design  r  regression  curve-fitting  change-point  loess  machine-learning  classification  self-study  monte-carlo  markov-process  references  mathematical-statistics  data-visualization  python  cart  boosting  regression  classification  robust  cart  survey  binomial  psychometrics  likert  psychology  asymptotics  multinomial 

Saya meninjau makalah yang telah melakukan> 15 tes Chi Square 2x2 terpisah. Saya telah menyarankan bahwa mereka perlu mengoreksi beberapa perbandingan, tetapi mereka telah menjawab mengatakan bahwa semua perbandingan telah direncanakan, dan karena itu ini tidak perlu. Saya merasa ini tidak boleh benar tetapi tidak dapat menemukan sumber daya yang …

20 hypothesis-testing  multiple-comparisons 

Saya pernah mendengar bahwa ketika banyak spesifikasi model regresi (katakanlah, dalam OLS) dianggap sebagai kemungkinan untuk dataset, ini menyebabkan beberapa masalah perbandingan dan nilai-p dan interval kepercayaan tidak lagi dapat diandalkan. Salah satu contoh ekstrem dari hal ini adalah regresi bertahap. Kapan saya bisa menggunakan data itu sendiri untuk membantu …

20 regression  frequentist  multiple-comparisons 

Apa metode yang disukai untuk melakukan post-hocs untuk dalam tes mata pelajaran? Saya telah melihat karya yang diterbitkan di mana Tukey's HSD digunakan tetapi review dari Keppel dan Maxwell & Delaney menunjukkan bahwa kemungkinan pelanggaran kebulatan dalam desain ini membuat istilah kesalahan salah dan pendekatan ini bermasalah. Maxwell & Delaney …

20 r  repeated-measures  multiple-comparisons  post-hoc  sphericity 

Saya telah membaca makalah hebat ini oleh David Colquhoun: Investigasi tingkat penemuan yang salah dan salah tafsir dari nilai-p (2014). Intinya, ia menjelaskan mengapa false discovery rate (FDR) bisa setinggi meskipun kami mengontrol kesalahan tipe I dengan α = 0,05 .30 %30%30\%α = 0,05α=0,05\alpha=0.05 Namun saya masih bingung apa yang …

19 hypothesis-testing  statistical-significance  p-value  multiple-comparisons  false-discovery-rate 

Seberapa konservatifkah koreksi beberapa pengujian Benjamini-Hochberg relatif terhadap jumlah perbandingan? Misalnya, jika saya memiliki daftar 18.000 fitur untuk dua grup dan saya melakukan tes Wilcoxon untuk mendapatkan nilai-p. Saya menyesuaikan nilai-p menggunakan Benjamini-Hochberg dan hampir tidak ada yang keluar sebagai signifikan. Saya tahu bahwa koreksi Bonferroni bisa sangat konservatif karena …

19 multiple-comparisons  p-value 

Latihan ini diberikan dalam Probability Theory: The Logic of Science oleh Edwin Jaynes, 2003. Ada solusi parsial di sini . Saya telah menemukan solusi parsial yang lebih umum, dan bertanya-tanya apakah ada orang lain yang menyelesaikannya. Saya akan menunggu sedikit sebelum memposting jawaban saya, untuk mencoba yang lain. Oke, jadi …

19 independence  likelihood-ratio  hypothesis-testing  multiple-comparisons