Условие задачи
Задана матрица вероятностей перехода дискретной цепи Маркова из i-ого состояния в j-ое состояние за один шаг (i.j = 1,2). Распределение вероятностей в начальный момент t = 0 определяется вектором q.
1. Найти матрицу Р3 – матрицу перехода системы из состояния i в состояние j за три шага.
2. Для заданных систем найти распределение вероятностей через 2 шага в момент времени t=2.
3. Найти вероятность того, что что в момент времени t =1 состояние цепи будет i = 2
4. Написать стационарное распределение
Ответ
а) 1. Матрицу переходных вероятностей за 3 шага найдем по формуле:
2. Распределение вероятностей через 2 шага найдем по формуле:
3. Распределение вероятностей через 1 шаг найдем по формуле: