1302
правки
Изменения
Нет описания правки
Такая матрица называется ''стохастической''.
В общем случае для марковской цепи задают вектор <tex> c_0</tex>. <tex>\ c_{0i} </tex> {{---}} вероятность того, что в начале процесса марковская цепь находиться находится в состоянии <tex> i </tex>.
Марковскую цепь можно представить в виде графа, в котором вершины {{---}} это состояния процесса, а ребра {{---}} переходы между состояниями, и на ребре из <tex> i </tex> в <tex> j </tex> написана вероятность перехода из <tex> i </tex> в <tex> j </tex>, то есть <tex> p_{ij} </tex>.
{{Определение | definition =
Состояние <tex> i </tex> называют '''поглощающим (существенным)''', если оно достижимо и <tex> p_{ii} = 1 </tex>.
Все остальные состояния называют '''непоглощающими (несущественными)'''.
}}
