Условие задачи
Задана матрица A интенсивностей переходов непрерывной цепи Маркова. Построить размеченный граф состояний. Провести классификацию состояний системы. Найти стационарное распределение вероятностей, если оно существует.
Ответ
Размеченный граф состояний цепи Маркова:
Состояния являются источниками первого порядка, значит . После устранения источников получаем подграф, в котором уже состояние является источником (источник второго порядка), поэтому . После устранения источника второго порядка получаем эргодическое подмножество состояний которому соответствует следующий подграф:
Потяни
