logo

Теорема о существовании предельных вероятностей для неприводимой и апериодической однородной цепи Маркова.

Теорема 1 Состояния неприводимой цепи Маркова либо все невозвратные, либо все возвратные нулевые. В случае непериодической цепи все состояния имеют один и тот же период.

Теорема 2 Для неприводимой и апериодической однородной цепи Маркова всегда существует предельные вероятности, не зависящие от начального распределения вероятностей.

Имеет место одна из двух возможностей:

  1. Либо все состояния цепи невозвратные или все возвратные нулевые, и тогда для всех j, и стационарного распределения не существует.

  2. Либо все состояния цепи возвратные ненулевые, и тогда для всех j, и в этом случае распределение является стационарным распределением вероятностей, причем величины однозначно определяются равенствами:

.