Условие задачи
Дана матрица переходных вероятностей.
Требуется:
1. Построить граф состояний.
2. Найти вероятности состояний системы после 1-го, 2-го шагов и 3-го шагов, если начальные распределения вероятностей известны.
Ответ
Построим граф состояний системы:
Используя матрицу переходных вероятностей, определим вероятности состояний после первого шага: