Условие задачи
Цепь Маркова с тремя состояниями 
характеризуется однородной стохастической матрицей
Стохастическая матрица:
Требуется:
1) изобразить граф состояний системы (сделать чертеж);
2) найти вероятность 
состояния системы на третьем шаге, если в начальный момент система находилась в 
состоянии .
Ответ
Изобразим граф состояний системы:
Найдем вероятность состояния системы на третьем шаге.
Т.к. в начальный момент система находилась в 
, то начальное распределение вероятностей: .
Потяни
