Условие задачи
Цепи Маркова с дискретным временем
Дан граф состояний системы. Вероятности переходов между состояниями системы на каждом шаге указаны в таблице 4.
Требуется:
1) составить матрицу переходов;
2) вычислить предельные вероятности состояний системы.
Ответ
1) Матрица перехода:
2) Стационарные предельные вероятности определяются из системы уравнений