logo
posled_POLUMARKOVSKIYe_PROTsYeSS_I_SPYeTsIAL_N_

1.5. Статистический смысл финальных (стационарных) вероятностей

Уравнение (13) домножим на πj, а уравнения системы (12) на πi для всех ij и просуммируем полученные равенства, запишем

.

Полученное равенство, в силу (10), перепишем в виде

1+πjqjjTjj=0.

Следовательно

. (14)

Здесь величина –1/qjj > 0, её смысл определим ниже, а величина Tjj – среднее значение длины интервала от текущего момента времени, когда цепь Маркова находится в состоянии j до момента следующего её попадания в это состояние после выхода из него, следовательно Tjj равна сумме среднего значения остаточного времени пребывания цепи Маркова в j-ом состоянии и среднего значения Tj – длины интервала от момента выхода цепи Маркова из этого состояния до момента возвращения в это состояние.