Эргодическая марковская цепь

Эргодическая цепь Маркова

Определение:

Марковская цепь называется эргодической, если существует путь из любого состояния в любое.

Регулярная цепь Маркова

Определение:

Марковская цепь называется регулярной (нормальной), если существует переход из любого состояния в любое.

Эргодическая теорема для регулярной марковской цепи

Утверждение:

Для регулярной марковской цепи существует такой вектор [math]\omega = \lim_{n \to +\infty} cP^n, \forall c[/math] такой, что [math]\omega = \omega P[/math].