Dalam banyak kasus, kedua pernyataan ini memiliki arti yang sama. Namun, mereka juga bisa sangat berbeda.
Menguji hipotesis terdiri dari pertama mengatakan apa yang Anda yakini akan terjadi dengan beberapa fenomena, kemudian mengembangkan semacam tes untuk fenomena ini, dan kemudian menentukan apakah fenomena tersebut benar-benar terjadi. Dalam banyak kasus, pengujian hipotesis tidak perlu melibatkan segala jenis uji statistik. Saya teringat akan kutipan ini oleh fisikawan Ernest Rutherford - Jika percobaan Anda membutuhkan statistik, Anda harus melakukan percobaan yang lebih baik.
Yang sedang berkata, pengujian hipotesis biasanya memang menggunakan semacam alat statistik.
Sebaliknya, pengujian signifikansi adalah konsep statistik murni. Pada dasarnya, seseorang memiliki dua hipotesis - hipotesis nol, yang menyatakan bahwa tidak ada perbedaan antara dua (atau lebih) koleksi data Anda. Hipotesis alternatif adalah bahwa ada perbedaan antara dua sampel Anda yang tidak terjadi secara kebetulan.
Berdasarkan desain penelitian Anda, Anda kemudian membandingkan dua (atau lebih) sampel menggunakan uji statistik, yang memberi Anda angka, yang kemudian Anda bandingkan dengan distribusi referensi (seperti distribusi normal, t, atau F) dan jika statistik tes ini melebihi nilai kritis, Anda menolak hipotesis nol dan menyimpulkan bahwa ada perbedaan antara dua (atau lebih) sampel. Kriteria ini biasanya bahwa kemungkinan perbedaan yang terjadi secara kebetulan kurang dari satu dalam dua puluh (p <0,05), meskipun yang lain kadang-kadang digunakan.