Условие:
Цепи Маркова с дискретным временем
Дан граф состояний системы. Вероятности переходов между состояниями системы на каждом шаге указаны в таблице 4.
Требуется:
1) составить матрицу переходов;
2) вычислить предельные вероятности состояний системы.
Решение:
1) Матрица перехода:
2) Стационарные предельные вероятности 
определяются из системы уравнений