Условие задачи
Дана матрица переходных вероятностей.
Требуется:
1. Построить граф состояний.
2. Найти вероятности состояний системы после 1-го, 2-го и 3-го шагов, если начальные распределения вероятностей известны.
Ответ
1. Строим граф состояний:
Матрица перехода на n-ом шаге имеет вид:
Вероятности состояний системы после n шагов: