Bagaimana cara memilih tingkat kepercayaan?

Saya sering menggunakan tingkat kepercayaan 90%, menerima bahwa ini memiliki tingkat ketidakpastian yang lebih besar daripada 95% atau 99%.

Tetapi apakah ada pedoman tentang cara memilih tingkat kepercayaan yang tepat? Atau pedoman untuk tingkat kepercayaan yang digunakan di berbagai bidang?

Juga, dalam menafsirkan dan menyajikan tingkat kepercayaan, apakah ada panduan untuk mengubah angka menjadi bahasa? Misalnya, seperti panduan seperti ini untuk Pearson's r ( edit: deskripsi ini untuk ilmu sosial):

http://faculty.quinnipiac.edu/libarts/polsci/Statistics.html

Memperbarui

Terima kasih atas jawaban di bawah ini. Mereka semua SANGAT membantu, berwawasan luas dan instruktif.

Selain itu, di bawah ini adalah beberapa artikel bagus tentang memilih tingkat signifikansi (pada dasarnya pertanyaan yang sama) yang saya temui saat melihat ke pertanyaan ini. Mereka memvalidasi apa yang dikatakan dalam jawaban di bawah ini.

"Apa signifikansi signifikansi 0,05?"

http://www.p-value.info/2013/01/whats-significance-of-005-significance_6.html

"Pada Asal-usul tingkat signifikansi 0,05 statistik"

http://www.radford.edu/~jaspelme/611/Spring-2007/Cowles-n-Davis_Am-Psyc_orignis-of-05-level.pdf

"Metode ilmiah: Kesalahan statistik"

http://www.nature.com/news/scientific-method-statribution-errors-1.14700

Selain jawaban Tim yang hebat, bahkan ada dalam bidang yang berbeda alasan untuk interval kepercayaan tertentu. Dalam uji klinis untuk hairspray, misalnya, Anda ingin sangat yakin perawatan Anda tidak akan membunuh siapa pun, katakanlah 99,99%, tetapi Anda akan baik-baik saja dengan interval kepercayaan 75% bahwa hairspray Anda membuat rambut tetap ada lurus.

Secara umum, interval kepercayaan harus digunakan sedemikian rupa sehingga Anda merasa nyaman dengan ketidakpastian, tetapi juga tidak begitu ketat sehingga menurunkan kekuatan studi Anda menjadi tidak relevan. Interval kepercayaan 90% berarti ketika mengulangi pengambilan sampel Anda akan berharap bahwa satu kali dalam sepuluh interval menghasilkan tidak akan memasukkan nilai sebenarnya. Berdasarkan apa yang Anda teliti, apakah itu dapat diterima? Di sisi lain, jika Anda lebih suka interval kepercayaan 99%, apakah ukuran sampel Anda cukup sehingga interval Anda tidak akan menjadi terlalu besar? (Semoga Anda memutuskan tingkat CI sebelum melakukan studi, kan?)

Dalam pengalaman saya (dalam ilmu sosial) dan dari apa yang saya lihat tentang istri saya (dalam ilmu biologi), sementara ada CI / semacam standar di berbagai bidang dan berbagai kasus tertentu, itu tidak biasa untuk Sebagian besar perdebatan tentang suatu topik adalah apakah Anda menetapkan interval CI atau tingkat signifikansi Anda dengan tepat. Saya pernah menghadiri rapat-rapat di mana seorang ahli statistik dengan sabar menjelaskan kepada klien bahwa walaupun mereka mungkin menyukai interval kepercayaan dua sisi 99%, agar data mereka menunjukkan signifikansi mereka harus meningkatkan sampel sepuluh kali lipat; dan saya pernah menghadiri pertemuan di mana klien bertanya mengapa tidak ada data mereka yang menunjukkan perbedaan signifikan, di mana kami dengan sabar menjelaskan kepada mereka itu karena mereka memilih interval tinggi - atau sebaliknya, semuanya signifikan karena interval yang lebih rendah diminta.

Apa yang saya sarankan adalah membaca beberapa makalah utama di bidang Anda (sedekat mungkin dengan topik spesifik Anda) dan lihat apa yang mereka gunakan; menggabungkannya dengan tingkat kenyamanan Anda dan ukuran sampel; dan kemudian bersiaplah untuk mempertahankan apa yang Anda pilih dengan informasi yang tersedia. Kecuali Anda berada di bidang dengan aturan yang sangat ketat - percobaan klinis saya curiga adalah satu-satunya yang benar-benar ketat, setidaknya dari apa yang saya lihat - Anda tidak akan mendapatkan yang lebih baik. (Dan jika ada aturan ketat, saya harapkan makalah utama di bidang Anda untuk mengikutinya!)

Memilih rentang interval kepercayaan adalah keputusan subyektif . Anda dapat memilih secara harfiah setiap interval kepercayaan: 50%, 90%, 99.999% ... dll. Ini tentang seberapa banyak kepercayaan yang Anda inginkan. Mungkin yang paling umum digunakan adalah 95% CI.

Mengenai interpretasi dan tautan yang Anda berikan ... Interpretasi semacam ini terlalu menyederhanakan . Korelasi adalah contoh yang baik, karena dalam konteks yang berbeda nilai yang berbeda dapat dianggap sebagai korelasi "kuat" atau "lemah", lihat beberapa contoh acak dari web :

• Saya pernah bertanya kepada seorang ahli kimia yang mengkalibrasi instrumen laboratorium ke standar berapa nilai koefisien korelasi yang ia cari. “0,9 terlalu rendah. Anda membutuhkan setidaknya 0,98 atau 0,99. " Dia mendapatkan nomor itu dari dokumen pedoman pemerintah.
• Saya pernah bertanya kepada seorang insinyur yang sedang melakukan analisis regresi dari suatu proses perawatan berapa nilai koefisien korelasi yang ia cari. "Apa pun antara 0,6 dan 0,8 dapat diterima." Profesor kampusnya mengatakan ini padanya.
• Saya pernah bertanya kepada seorang ahli biologi yang sedang melakukan ANOVA seukuran tikus lapangan yang hidup di tanah yang terkontaminasi versus murni, berapa nilai koefisien korelasi yang ia cari. Dia tidak tahu, tetapi cutoff-nya adalah 0,2 berdasarkan perbedaan ukuran terkecil yang dapat dideteksi oleh modelnya dengan jumlah sampel yang dia miliki.

Maaf, tapi tidak ada jalan pintas ...

Untuk mendapatkan perasaan yang lebih baik tentang interval kepercayaan Anda bisa membaca lebih lanjut tentang mereka misalnya di sini , di sini , atau di sini .

Meskipun, umumnya tingkat kepercayaan diserahkan kepada kebijaksanaan analis, ada beberapa kasus ketika mereka ditetapkan oleh hukum dan peraturan. Saya akan memberikan dua contoh.

Dalam pengawasan perbankan Anda harus menggunakan tingkat kepercayaan 99% saat menghitung risiko tertentu, lihat hal.2 dalam peraturan Basel ini .

FDA dapat menginstruksikan untuk menggunakan tingkat kepercayaan tertentu untuk pengujian obat dan alat dalam metodologi statistik mereka.

Secara keseluruhan, ini adalah praktik yang baik untuk berkonsultasi dengan pakar di bidang Anda untuk mencari tahu apa praktik dan peraturan yang diterima terkait tingkat kepercayaan.