Условие задачи
Задана матрица интенсивностей переходов непрерывной цепи Маркова. Построить размеченный граф состояний. Провести классификацию состояний системы. Найти стационарное распределение вероятностей, если оно существует.
Ответ
Размеченный граф состояний цепи Маркова:
Состояние e3 является источником первого порядка, значит p3=0. После устранения источник первого порядка получаем подграф, в котором состояние e5 является источником, поэтому и p5=0. После устранения источника второго порядка получаем эргодическое подмножество состояний e1, e2, e4 которому соответствует следующий подграф:
Потяни
