Question

Цепь Маркова задана матрицей перехода. Определите вероятность того, что за 2 шага система перейдет из состояния E2 в E2.

Answer 1

исходное состояние - строка

конечное - столбец

варианты такие

Е2-Е0-Е2 вероятность 0*0=0

Е2-Е1-Е2 вероятность 0*0=0

Е2-Е2-Е2 вероятность 0,9*0,9=0,81

Е2-Е3-Е2 вероятность 0,1*0,7=0,07

суммируем все возможности

0+0+0,81+0,07=0,88