● Состояние называют необратимым, если существует такое состояние и такое количество шагов , что , но для всех значений m. Остальные состояния называются обратимыми.
● Два состояния и , для которых и , то такие состояния называются соединеняющимися.
● Если соединяется с , а состояние соединяется с , то состояние соединяется с . Это свойство состояний цепи Маркова позволяет множество обратимых состояний разбить на классы (подмножества) соединяющихся состояний так, что состояния, которые принадлежат разным классам, не соединяются между собой.
● Если множество соединяющихся состояний состоит из одного состояния, это состояние называется поглощающим состоянием. В это состояние процесс может войти, но выйти из него не может. Это значит, что для поглощающего состояния вероятности перехода равняются: , а .
● Если среди всех состояний МЦ есть хотя бы одно поглощающее состояние, цепь называют поглощающей цепью Маркова.
● ЦМ, которая не содержит поглощающих состояний и состоит из одного класса соединеняющихся состояний, называют эргодической ЦМ.
Рис. 6. 2
На практике удобно изображать ЦМ в виде ориентированного графа, позволяющего наглядно представить возможный характер развития процесса. Вершины графа соответствуют состояниям цепи. Каждой дуге перехода из состояния в состояние ставится в соответствие вероятность перехода . Пример ориентированного графа ЦМ приведен на рис. 6.2.
Все материалы представленные на сайте исключительно с целью ознакомления читателями и не преследуют коммерческих целей или нарушение авторских прав. Студалл.Орг(0.002 сек.)