Pertanyaan yang diberi tag «scoring-rules»

Aturan penilaian digunakan untuk menilai keakuratan probabilitas yang diprediksi, atau lebih umum dari kepadatan prediktif. Contoh aturan penilaian termasuk logaritmik, Brier, spherical, probabilitas peringkat dan skor Dawid-Sebastiani dan penyimpangan prediksi.

1
Kapan aturan penilaian yang tepat merupakan estimasi generalisasi yang lebih baik dalam pengaturan klasifikasi?
Pendekatan khas untuk memecahkan masalah klasifikasi adalah mengidentifikasi kelas model kandidat, dan kemudian melakukan pemilihan model menggunakan beberapa prosedur seperti validasi silang. Biasanya seseorang memilih model dengan akurasi tertinggi, atau beberapa fungsi terkait yang menyandikan informasi spesifik masalah, seperti .FβFβ\text{F}_\beta Dengan asumsi tujuan akhir adalah untuk menghasilkan classifier yang akurat …

1
Bagaimana cara mengukur akurasi perkiraan probabilistik?
Misalkan saya membuat banyak ramalan probabilistik seperti: 70% probabilitas bahwa pertumbuhan penjualan akan menjadi 10-15% pada Q1, probabilitas 10% bahwa pertumbuhan penjualan akan> 15%, probabilitas 20% bahwa pertumbuhan penjualan akan <10% Mengingat data aktual, apa cara terbaik untuk mengukur atau melacak akurasi saya? Skor penghalang? Dan dapatkah saya meratakan skor …

2
Gagasan alternatif untuk aturan penilaian yang tepat, dan menggunakan aturan penilaian untuk mengevaluasi model
Sebuah aturan skoring adalah sarana mengevaluasi menebak sebuah agen dari probabilitas yang terkait dengan acara kategoris, diberi (kategoris) hasil dari acara tersebut. Bergantung pada tebakan dan hasil yang diamati, aturan pemberian skor memberi nilai pada agen (angka sebenarnya). Aturan penilaian seharusnya menetapkan skor sedemikian rupa sehingga, rata-rata, agen dengan skor …

1
Menggunakan aturan penilaian yang tepat untuk menentukan keanggotaan kelas dari regresi logistik
Saya menggunakan regresi logistik untuk memprediksi kemungkinan suatu peristiwa terjadi. Pada akhirnya, probabilitas ini dimasukkan ke dalam lingkungan produksi, tempat kami memfokuskan sebanyak mungkin pada prediksi kami yang "Ya". Oleh karena itu berguna bagi kita untuk memiliki gagasan tentang "hit" atau "non-hit" definitif apa yang mungkin menjadi apriori (sebelum berjalan …
Dengan menggunakan situs kami, Anda mengakui telah membaca dan memahami Kebijakan Cookie dan Kebijakan Privasi kami.
Licensed under cc by-sa 3.0 with attribution required.