Условие задачи
Цепь Маркова с тремя состояниями S1, S2, S3 характеризуется однородной стохастической матрицей
где
Стохастическая матрица:
Требуется:
1) изобразить граф состояний системы (сделать чертеж);
2) найти вероятность Pj(3) состояния системы на третьем шаге, если в начальный момент система находилась в состоянии Sj.
Ответ
Граф состояний системы:
Т.к. в начальный момент система находилась в S1, то начальное распределение вероятностей: