Условие задачи
Составить схему процесса Маркова, по ней составить матрицу перехода. Будет ли процесс эргодичен, почему?
Лежат 4 монеты кверху решками. Повторяется следующая операция: равновероятно выбирается из них одна монета и тут же бросается, причём вероятность выпадения решки равна р. Определим значения процесса 
на шаге как разность между числом лежащихрешек и числом гербов.
Ответ
Составим схему процесса Маркова.
Пусть на некотором шаге число монет, лежащих кверху решкой, равняется t. Тогда значение случайного процесса 
. Выражая число монет, лежащих кверху через значение случайного процесса, получаем:
Потяни
