Пусть существует хотя бы одно состояние
и такие
и
, что
. Тогда существует и притом единственное стационарное распределение
, такое, что
при
. Кроме того,
равномерно по всем состояниям не зависимо от начального распределения вероятностей.
Пример 2.1. В моменты времени
производится осмотр ЭВМ. Возможные состояния ЭВМ:
– полностью исправна;
– незначительные неисправности, которые позволяют эксплуатировать ЭВМ;
– существенные неисправности, дающие возможность решать ограниченное число задач;
– ЭВМ полностью вышла из строя. Матрица переходных вероятностей имеет вид:
.
Построить граф состояний. Найти вероятности состояний ЭВМ после трех осмотров, если вначале (при
) ЭВМ была полностью исправна.
Решение. 
По условию вектор вероятности состояний ЭВМ в начальный момент времени (до первого осмотра) равен
.
После трех осмотров он будет равен
,
где
,
,
.
С вычислительной точки зрения данную задачу проще решать по рекуррентной формуле:
,
,
,
,
.






