در مدلهای مارکوف معمولی (Markov models)، حالت ها (States) به طور مستقیم قابل مشاهده هستند (Observable) و یک زنجیره یا فرآیند مارکوف تنها با مشخص بودن احتمالات گذار و یا نرخ های گذرا خود قابل معرفی است.
