Условие:
Дана матрица переходных вероятностей.
Требуется:
1. Построить граф состояний.
2. Найти вероятности состояний системы после 1-го, 2-го шагов и 3-го шагов, если начальные распределения вероятностей известны.

Решение:
Построим граф состояний системы:

Используя матрицу переходных вероятностей, определим вероятности состояний
после первого шага:
