Безусловные вероятности состояний марковской цепи
Кроме условных вероятностей (матриц перехода) часто возникает необходимость найти безусловные вероятности состояний системы в 1, 2,…, n -й моменты времени. Для их определения используют вектор-строку вероятностей начальных состояний .
Безусловная (абсолютная) вероятность того, что после первого шага цепь Маркова перейдет в состояние j определяется очевидным соотношением
. (6.10)
Совокупность безусловных вероятностей состояний образует вектор-строку .
Из (6.10) следует, что вектор-строка вероятностей состояния цепи после первого шага равняется произведению вектора-строки вероятностей начальных состояний на матрицу перехода, то есть
.
Очевидно, что вектор-строка вероятностей состояний после n -го шага определяется выражением
. (6.11)
Время существования процесса в поглощающей цепи Маркова конечно. Однако если в цепи отсутствуют поглощающие состояния, процесс в нем может развиваться как угодно долго. В связи с этим часто вызывает интерес вопрос о том, как с течением времени изменяются безусловные вероятности состояний эргодической ЦМ.
1 | 2 | 3 | 4 | 5 | 6 | 7 | 8 | 9 | 10 | 11 | 12 | 13 | 14 | 15 | 16 | 17 | 18 | 19 | 20 | 21 | 22 | 23 | 24 | 25 | 26 | 27 | 28 | 29 | 30 | 31 | 32 | 33 | 34 | 35 | Поиск по сайту:
|