Dari perspektif frequentist, perbandingan yang tidak disesuaikan berdasarkan distribusi permutasi selalu dapat dibenarkan setelah studi acak (dengan benar). Pembenaran serupa dapat dibuat untuk inferensi berdasarkan distribusi parametrik umum (misalnya, distribusi atau distribusi ) karena kesamaannya dengan distribusi permutasi. Faktanya, penyesuaian untuk kovariat — ketika mereka dipilih berdasarkan analisis post-hoc — sebenarnya berisiko meningkatkan kesalahan Tipe I. Catatan bahwa pembenaran ini tidak ada hubungannya dengan tingkat keseimbangan dalam diamati sampel, atau dengan ukuran sampel (kecuali bahwa untuk sampel kecil distribusi permutasi akan lebih diskrit, dan kurang baik didekati olehtFtatau distribusi ).F
Yang mengatakan, banyak orang sadar bahwa menyesuaikan untuk kovariat dapat meningkatkan presisi dalam model linier. Secara khusus, penyesuaian untuk kovariat meningkatkan ketepatan dari efek pengobatan yang diperkirakan ketika mereka memprediksi hasil dan tidak berkorelasi dengan variabel pengobatan (seperti yang benar dalam kasus penelitian acak). Namun, yang kurang dikenal adalah bahwa ini tidak secara otomatis terbawa ke model non-linear. Sebagai contoh, Robinson dan Jewell [1] menunjukkan bahwa dalam kasus regresi logistik, mengendalikan kovariat mengurangi ketepatan efek pengobatan yang diperkirakan, bahkan ketika mereka memprediksi hasilnya. Namun, karena efek pengobatan diperkirakan juga lebih besar dalam model disesuaikan, mengendalikan kovariat prediktif hasilnya tidak meningkatkan efisiensi saat menguji hipotesis nol tanpa efek pengobatan setelah studi acak.
[1] LD Robinson dan NP Jewell. Beberapa hasil mengejutkan tentang penyesuaian kovariat dalam model regresi logistik. Tinjauan Statistik Internasional , 58 (2): 227–40, 1991.