Регулярная марковская цепь

Материал из Викиконспекты
Перейти к: навигация, поиск

Регулярная цепь Маркова

Определение:
Регулярной марковской цепь называется цепь без невозвратных состояний и имеющая единственное эргодическое множество с одним циклическим классом.


Определение:
Состояние [math]i[/math] называется возвратным, если [math]p_{ii} = 1[/math].


Эргодическая теорема для регулярной марковской цепи

Утверждение:
Для регулярной марковской цепи существует такой вектор [math]\omega = \lim\limits _{n \to +\infty} cP^n, \forall c[/math] такой, что [math]\omega = \omega P[/math].

См. также

Литература

Дж. Кемени, Дж. Снелл "Конечные цепи Маркова"