Изменения

Перейти к: навигация, поиск

Теорема о поглощении

2302 байта добавлено, 17:30, 18 марта 2018
Нет описания правки
{{Определение
|definition=
Матрицу <tex>Q</tex> называют '''непоглощающей''' (англ. ''not-absorbing''), если она не содержит поглощающих состояний. То есть <tex>q_{ii} \neq 1, \forall i </tex>
}}
 
{{Определение
|definition=
Стохастическую матрицу с <tex>r</tex> [[Марковская цепь#Поглощающая цепь|поглощающими состояниями]] и <tex>t</tex> непоглощающими, можно перевести в '''каноническую форму''' (англ. ''canonical form''):
<tex>P = \begin{pmatrix}
Q & R \\
0 & I
\end{pmatrix}</tex> ,
 
где <tex>I</tex> — единичная матрица (<tex>r \times r</tex>), <tex>0</tex> — нулевая матрица (<tex>r \times t</tex>), <tex>R</tex> — ненулевая поглощающая матрица (<tex>t \times r</tex>) и <tex>Q</tex> — непоглощающая (<tex>t \times t</tex>). Первые <tex>t</tex> состояний переходные и последние <tex>r</tex> состояний поглощающие.
}}
 
{{
Теорема
|about=о поглощении
|statement=С Если цепь поглощающая, то с вероятностью, равной <tex>1</tex>, она перейдет в [[Марковская цепь|марковская цепь]] перейдет в [[Расчет вероятности поглощения в состоянии#Поглощающая цепь№|поглощающее состояние]], если у нее существует такое состояние.
|proof=
Пусть <tex>P</tex> - [[Марковская цепь|матрица переходов]], где элемент <tex>p_{ij}</tex> равен вероятности перехода из <tex>i</tex>-го состояния в <tex>j</tex>-ое. Она будет выглядеть как матрица из 4-х блоков, где <tex>Q</tex> - несущественные состояния, а <tex>R</tex> и <tex>I</tex> - существенные (т.к. цепь поглощающая, то из любого несущественного можно попасть Приведем ее в существенное). <tex>I</tex> - единичная матрица.каноническую форму:
Пусть вектор <tex>c^{(t)}</tex> - вектор вероятности нахождения на шаге <tex>t</tex>.
Он вычисляется, как произведение вектора на нулевом шаге на матрицу перехода в степени <tex>t</tex>.
<tex> c^{(t)} = c^{(0)} \times P^t</tex>
Для <tex>t = 2</tex> :
<tex>P^{2} =</tex><tex>\begin{pmatrix}
Q & R \\
0 & I
\end{pmatrix}</tex> .
<tex>(</tex>Произведение единичной матрицы на саму себя есть единичная матрица (<tex>(I \times I = I);</tex> ); <tex>X</tex> - некоторые значения<tex>(не важны для доказательства теоремы, так как чтобы доказать теорему достаточно доказать, что непоглощающие состояния стремятся к 0).</tex>
Отсюда видноПродолжив вычисления, получим, что <tex>P^n</tex> имеет такой следующий вид: <tex>\begin{pmatrix}
Q^n & X \\
0 & I
\end{pmatrix}</tex> . Докажем, где что <tex>XQ^n \xrightarrow{} 0</tex>, при <tex> n\xrightarrow{}+\infty</tex> - некоторые значения.
Следовательно нам надо доказать, что <tex>Q^n \xrightarrow{} 0</tex>, при <tex> n\xrightarrow{}+\infty</tex>
Рассмотрим путь из <tex>i</tex>-го состояния в поглощающее состояние <tex>j</tex>. Пусть мы совершили <tex>m</tex> шагов из состояния <tex>i</tex>, тогда обозначим <tex>p_{m}</tex> — вероятность попасть в поглощающее состояние <tex>j</tex> за такое количество шагов. Заметим, что <tex>p_{m} < 1</tex>
Рассмотрим путь из i-го состояния Теперь обобщим в поглощающее, равное большую сторону для любого количества шагов: пусть <tex>m_ip = \max(p_{m})< 1</tex>. Пусть В таком случае <tex>p<1</tex> - — наибольшая вероятность того, что через <tex>m_i</tex> шагов из шага <tex>i</tex> не попадет попасть в поглощающее состояние.Пусть <tex>m = max(m_i)j</tex>, а совершив при этом не более чем <tex>p = max(p_i)< 1m</tex>шагов.
Тогда получаем: вероятность перехода в состояние <tex>\sum_{j} {Q^m_{ij}}\leqslant p</tex> на шаге <tex>\Rightarrowm</tex> равна <tex>p_{m} = \sum_sum\limits_{j} {Qq^{mkm}_{ij}}\leqslant p</tex>, где <tex>q_{ij}^k\xrightarrow{k\xrightarrowm}</tex> — элемент матрицы <tex>Q^{m}+\infty}0</tex>.
В то же время, <tex>\sum\limits_{j} {q^m_{ij}}\leqslant p</tex> потому что <tex>p_{m} \leqslant p, \forall m</tex> по условию обозначения <tex>p</tex>. Возведем обе части в степень <tex>k \rightarrow \infty</tex>, получим: <tex>\sum\limits_{j} {q^{mk}_{ij}}\leqslant p^k\xrightarrow{k\xrightarrow{}+\infty}0</tex> В итоге получаем, что несущественные непоглощающие состояния стремятся к <tex>0</tex>, а значит существенные поглощающие в итоге приходят к <tex>1</tex>, т.е. то есть цепь приходит в поглощающее состояние.
}}
 
== См.также ==
* [[Марковская цепь]]
* [[Эргодическая марковская цепь]]
* [[Регулярная марковская цепь]]
 
== Источники информации ==
* ''Дж. Кемени, Дж. Снелл'' — "Конечные цепи Маркова", издание "Наука", 1970г., стр. 62
 
[[Категория:Дискретная математика и алгоритмы]]
[[Категория: Марковские цепи ]]
78
правок

Навигация