Pertanyaan yang diberi tag «markov-process»

Saya memiliki rangkaian lengkap (tepatnya 432 pengamatan) dari 4 status : misA−DA−DA-D Y=⎛⎝⎜⎜⎜⎜AB⋮BCA⋮CDA⋮ADC⋮DBA⋮AA−⋮BC−⋮A⎞⎠⎟⎟⎟⎟Y=(ACDDBACBAACA−−⋮⋮⋮⋮⋮⋮⋮BCADABA)Y=\left(\begin{array}{c c c c c c c} A& C& D&D & B & A &C\\ B& A& A&C & A&- &-\\ \vdots&\vdots&\vdots&\vdots&\vdots&\vdots&\vdots\\ B& C& A&D & A & B & A\\ \end{array}\right) EDIT: The observation sequences are of …

16 r  matlab  markov-process 

Apa perbedaan antara rantai Markov dan proses Markov? Saya membaca informasi yang bertentangan: kadang-kadang definisi didasarkan pada apakah ruang keadaan diskrit atau kontinu, dan kadang-kadang didasarkan pada apakah waktu diskrit kontinu. Slide 20 dokumen ini : Proses Markov disebut rantai Markov jika ruang keadaan diskrit, yaitu terbatas atau ruang dihitung …

16 terminology  stochastic-processes  markov-process 

Pertanyaan dasar saya adalah: bagaimana Anda akan mengambil sampel dari distribusi yang tidak tepat? Apakah masuk akal untuk mengambil sampel dari distribusi yang tidak tepat? Komentar Xi'an di sini semacam menjawab pertanyaan itu, tetapi saya sedang mencari beberapa detail lebih lanjut tentang ini. Lebih spesifik untuk MCMC: Dalam berbicara tentang …

15 distributions  bayesian  mcmc  markov-process  improper-prior 

Saya mencoba memahami rantai Markov menggunakan SAS. Saya mengerti bahwa proses Markov adalah satu di mana keadaan di masa depan hanya bergantung pada keadaan saat ini dan bukan pada keadaan masa lalu dan ada matriks transisi yang menangkap probabilitas transisi dari satu keadaan ke keadaan lain. Tapi kemudian saya menemukan …

15 probability  simulation  mcmc  monte-carlo  markov-process 

Saya sedang menjalani beberapa kuliah yang berhubungan dengan MCMC. Namun, saya tidak menemukan contoh yang baik tentang bagaimana ini digunakan. Adakah yang bisa memberi saya contoh nyata. Yang bisa saya lihat adalah mereka menjalankan rantai Markov dan mengatakan bahwa distribusi stasionernya adalah distribusi yang diinginkan. Saya ingin contoh yang bagus …

14 probability  bayesian  mcmc  markov-process 

Pembelajaran Penguatan: Suatu Pengantar. Edisi kedua, dalam proses ., Richard S. Sutton dan Andrew G. Barto (c) 2012, hlm. 67-68. Memecahkan tugas pembelajaran penguatan berarti, secara kasar, menemukan kebijakan yang mencapai banyak penghargaan dalam jangka panjang. Untuk MDP terbatas, kita dapat dengan tepat menetapkan kebijakan optimal dengan cara berikut. Fungsi …

14 markov-process  reinforcement-learning 

Saya mencari paket R umum, bersih dan cepat (yaitu menggunakan C ++ rutin) untuk mensimulasikan jalur dari difusi nonlinear non-homogen seperti (1) menggunakan skema Euler-Maruyama, skema Milstein (atau lainnya). Ini ditakdirkan untuk tertanam ke dalam kode estimasi yang lebih besar dan karenanya layak dioptimalkan. dXt= f( θ , t , …

13 r  simulation  stochastic-processes  markov-process 

Apa yang akan menjadi cara umum untuk memperkirakan matriks transisi MC mengingat jangka waktu? Apakah ada fungsi R untuk melakukan itu?

12 markov-process 

Saya kira saya memahami persamaan kondisi keseimbangan terperinci, yang menyatakan bahwa untuk probabilitas transisi dan distribusi stasioner , Rantai Markov memenuhi keseimbangan terperinci jikaπ q ( x | y ) π ( y ) = q ( y | x ) π ( x ) ,qqqππ\piq( x | y) π( …

12 probability  mcmc  markov-process 

Saya mengalami kesulitan memahami properti rantai Markov tidak dapat direduksi . Dapat direduksi dikatakan berarti bahwa proses stokastik dapat "pergi dari negara bagian ke negara bagian". Tetapi apa yang menentukan apakah ia dapat beralih dari status ke status , atau tidak bisa?jiiijjj The halaman wikipedia memberikan formalisasi: Negara adalah diakses …

12 stochastic-processes  markov-process 

Saya berjuang untuk membuat koneksi matematis antara jaringan saraf dan model grafis. Dalam model grafis idenya sederhana: distribusi probabilitas memfaktorkan menurut klik dalam grafik, dengan potensi yang biasanya dari keluarga eksponensial. Apakah ada alasan yang setara untuk jaringan saraf? Bisakah seseorang mengungkapkan distribusi probabilitas atas unit (variabel) dalam mesin Boltzmann …

11 neural-networks  markov-process  graphical-model  deep-learning  deep-belief-networks 

Saya memiliki model stokastik yang digunakan untuk mensimulasikan deret waktu dari beberapa proses. Saya tertarik pada efek mengubah satu parameter ke nilai tertentu dan ingin menunjukkan perbedaan antara deret waktu (katakanlah model A dan model B) dan semacam interval kepercayaan berbasis simulasi. Saya hanya menjalankan banyak simulasi dari model A …

11 time-series  predictive-models  markov-process 

Saya ingin menyelesaikan Project Euler 213 tetapi tidak tahu harus mulai dari mana karena saya orang awam di bidang Statistik, perhatikan bahwa jawaban yang akurat diperlukan agar metode Monte Carlo tidak akan berfungsi. Bisakah Anda merekomendasikan beberapa topik statistik untuk saya baca? Tolong jangan posting solusinya di sini. Kutu Sirkus …

11 self-study  monte-carlo  markov-process 

Diberikan seri waktu (diamati) dengan , apakah ada uji statistik untuk menguji hipotesis nol bahwa (yaitu properti markov)?X t ∈ { 1 , . . . , N } P ( X t | X t - 1 , X t - 2 , . . . , X 1 …

11 time-series  hypothesis-testing  markov-process 

Saat ini saya sedang melakukan analisis pada situs web yang mengharuskan saya membuat diagram pohon keputusan yang menunjukkan kemungkinan rute yang diambil orang ketika mereka tiba di situs web. Saya berurusan dengan data.frameyang menunjukkan jalur semua pelanggan ke situs, mulai dari beranda. Misalnya, pelanggan dapat mengambil jalur berikut: Homepage - …

10 r  probability  data-visualization  markov-process