در مدلهای مارکوف معمولی (Markov models)، حالت ها (States) به طور مستقیم قابل مشاهده هستند (Observable) و یک زنجیره یا فرآیند مارکوف تنها با مشخص بودن احتمالات گذار و یا نرخ های گذرا خود قابل معرفی است.

در این پست آموزش ویدئویی زنجیره و فرآیند تصادفی مارکوف قرار داده شده است. زنجیره مارکوف (Markov Chain) یا فرآیند مارکوف (Markov…