Beberapa orang Bayesian menyerang kesimpulan sering yang menyatakan bahwa "tidak ada distribusi pengambilan sampel yang unik" karena itu tergantung pada niat peneliti (Kruschke, Aguinis, & Joo, 2012, p. 733).
Misalnya, seorang peneliti memulai pengumpulan data, tetapi pendanaannya tiba-tiba terpotong setelah 40 peserta. Bagaimana distribusi sampling (dan CI dan nilai-p) selanjutnya bahkan didefinisikan di sini? Apakah kita akan menganggap setiap sampel konstituen memiliki N = 40? Atau apakah itu terdiri dari sampel dengan N berbeda, dengan masing-masing ukuran ditentukan oleh waktu acak lain dananya mungkin telah dipotong?
Distribusi t, F, chi-square (dll), null yang ditemukan dalam buku teks semuanya mengasumsikan bahwa N adalah tetap dan konstan untuk semua sampel konstituen, tetapi dalam praktiknya hal ini mungkin tidak benar. Dengan setiap prosedur penghentian yang berbeda (misalnya, setelah interval waktu tertentu atau sampai asisten saya lelah) tampaknya ada distribusi pengambilan sampel yang berbeda, dan menggunakan distribusi tetap-N yang 'dicoba dan benar' ini tidak pantas.
Seberapa merusak kritik ini terhadap legitimasi CI dan nilai-p yang sering terjadi? Apakah ada bantahan teoretis? Tampaknya dengan menyerang konsep distribusi sampling, seluruh bangunan inferensi frequentist lemah.
Referensi ilmiah sangat dihargai.