Pertanyaan yang diberi tag markov-process

Proses stokastik dengan properti yang masa depan tidak tergantung pada kondisi masa lalu, mengingat masa kini.

29
Hitung Matriks Transisi (Markov) di R

Apakah ada cara dalam R (fungsi bawaan) untuk menghitung matriks transisi untuk Rantai Markov dari serangkaian pengamatan? Misalnya, mengambil kumpulan data seperti berikut dan menghitung matriks transisi orde pertama? dat<-data.frame(replicate(20,sample(c("A", "B", "C","D"), size = 100,...

22
Markov Memproses hanya tergantung pada kondisi sebelumnya

Saya hanya ingin seseorang untuk mengkonfirmasi pemahaman saya atau jika saya kehilangan sesuatu. Definisi proses markov mengatakan langkah selanjutnya tergantung pada kondisi saat ini saja dan tidak ada status masa lalu. Jadi, katakanlah kita memiliki ruang keadaan a, b, c, d dan kita pergi dari...

21
Contoh masalah model Markov tersembunyi?

Saya membaca sedikit model Markov yang tersembunyi dan dapat mengkodekan versi yang cukup mendasar sendiri. Tetapi ada dua cara utama yang tampaknya saya pelajari. Salah satunya adalah membaca dan mengimplementasikannya ke dalam kode (yang dilakukan) dan yang kedua adalah memahami bagaimana itu...

21
Bagaimana cara memproyeksikan vektor baru ke ruang PCA?

Setelah melakukan analisis komponen utama (PCA), saya ingin memproyeksikan vektor baru ke ruang PCA (yaitu menemukan koordinatnya dalam sistem koordinat PCA). Saya telah menghitung PCA dalam bahasa R menggunakan prcomp. Sekarang saya harus bisa mengalikan vektor saya dengan matriks rotasi PCA....

21
Apa perbedaan antara distribusi "pembatas" dan "stasioner"?

Saya melakukan pertanyaan pada rantai Markov dan dua bagian terakhir mengatakan ini: Apakah rantai Markov ini memiliki distribusi terbatas. Jika jawaban Anda adalah "ya", cari distribusi terbatas. Jika jawaban Anda "tidak", jelaskan alasannya. Apakah rantai Markov ini memiliki distribusi...

20
Contoh kehidupan nyata dari Proses Keputusan Markov

Saya telah menonton banyak video tutorial dan terlihat sama. Yang ini misalnya: https://www.youtube.com/watch?v=ip4iSMRW5X4 Mereka menjelaskan keadaan, tindakan dan probabilitas yang baik-baik saja. Orang itu menjelaskannya baik-baik saja tetapi sepertinya saya tidak bisa memahami apa yang akan...

17
Periksa properti tanpa memori dari rantai Markov

Saya menduga bahwa serangkaian urutan yang diamati adalah rantai Markov ... X=⎛⎝⎜⎜⎜⎜AB⋮BCA⋮CDA⋮ADC⋮DBA⋮AAD⋮BCA⋮E⎞⎠⎟⎟⎟⎟X=(ACDDBACBAACADA⋮⋮⋮⋮⋮⋮⋮BCADABE)X=\left(\begin{array}{c c c c c c c} A& C& D&D & B & A &C\\ B& A& A&C & A&D &A\\ \vdots&\vdots&\vdots&\vdots&\vdots&\vdots&\vdots\\ B& C& A&D & A &...

16
Memperkirakan probabilitas transisi Markov dari data urutan

Saya memiliki rangkaian lengkap (tepatnya 432 pengamatan) dari 4 status : misA−DA−DA-D Y=⎛⎝⎜⎜⎜⎜AB⋮BCA⋮CDA⋮ADC⋮DBA⋮AA−⋮BC−⋮A⎞⎠⎟⎟⎟⎟Y=(ACDDBACBAACA−−⋮⋮⋮⋮⋮⋮⋮BCADABA)Y=\left(\begin{array}{c c c c c c c} A& C& D&D & B & A &C\\ B& A& A&C & A&- &-\\ \vdots&\vdots&\vdots&\vdots&\vdots&\vdots&\vdots\\ B& C&...

14
Contoh praktis untuk MCMC

Saya sedang menjalani beberapa kuliah yang berhubungan dengan MCMC. Namun, saya tidak menemukan contoh yang baik tentang bagaimana ini digunakan. Adakah yang bisa memberi saya contoh nyata. Yang bisa saya lihat adalah mereka menjalankan rantai Markov dan mengatakan bahwa distribusi stasionernya...