Задача об оптимальном префиксном коде с сохранением порядка. Монотонность точки разреза — различия между версиями

Материал из Викиконспекты
Перейти к: навигация, поиск
м
м
Строка 7: Строка 7:
 
Пусть у нас есть алфавит <tex> \Sigma </tex>. Каждому символу <tex>c_i </tex> сопоставим его код <tex> p_i </tex>. Кодирование называется оптимальным префиксным с сохранением порядка, если соблюдаются:
 
Пусть у нас есть алфавит <tex> \Sigma </tex>. Каждому символу <tex>c_i </tex> сопоставим его код <tex> p_i </tex>. Кодирование называется оптимальным префиксным с сохранением порядка, если соблюдаются:
 
# Условие порядка - <tex> \forall i, j : c_i < c_j \iff p_i < p_j </tex>. То есть, если символ <tex>c_i </tex> лексикографически меньше символа <tex> c_j </tex>, его код также будет [[лексикографический порядок | лексикографически]] меньше, и наоборот.
 
# Условие порядка - <tex> \forall i, j : c_i < c_j \iff p_i < p_j </tex>. То есть, если символ <tex>c_i </tex> лексикографически меньше символа <tex> c_j </tex>, его код также будет [[лексикографический порядок | лексикографически]] меньше, и наоборот.
# Условие оптимальности - <tex> \sum\limits_{i = 1}^{|\Sigma|} f_i \cdot |p_i| </tex> - минимально, где <tex> f_i </tex> - количество(или вероятность) встретить символ <tex> c_i </tex> в тексте, а <tex>|p_i| </tex> - длина его кода.
+
# Условие оптимальности - <tex> \sum\limits_{i = 1}^{|\Sigma|} f_i \cdot |p_i| </tex> - минимально, где <tex> f_i </tex> - частота встречаемости символа <tex> c_i </tex> в тексте, а <tex>|p_i| </tex> - длина его кода.
 
}}
 
}}
  
Строка 16: Строка 16:
 
Тогда пересчет <tex> D[i][j] </tex> будет происходить так:
 
Тогда пересчет <tex> D[i][j] </tex> будет происходить так:
  
<tex> D[i][j] = \min\limits_{k = i}^{j - 1} \left ( D[i][k] + D[k + 1][j] \right ) + \sum\limits_{t = i}^{j} f_t </tex>
+
<tex> D[i][j] = \min\limits_{k = i}^{j - 1} \left ( D[i][k] + D[k + 1][j] \right ) + w[i][j]</tex>
  
 
Базой динамики будет <tex> D[i][i] = 0 </tex>
 
Базой динамики будет <tex> D[i][i] = 0 </tex>
  
Добавочный член <tex> \sum\limits_{t = i}^{j} f_t </tex> возникает от того что каждым объединением двух подотрезков мы увеличиваем высоту дерева на 1, а значит, и длины всех кодов символов <tex> c_i .. c_j </tex> также увеличиваются на 1.
+
Добавочный член <tex>w[i][j] = \sum\limits_{t = i}^{j} f_t </tex> возникает от того что каждым объединением двух подотрезков мы увеличиваем высоту дерева на 1, а значит, и длины всех кодов символов <tex> c_i .. c_j </tex> также увеличиваются на 1.
  
 
Тогда такое ''наибольшее'' k, на котором достигается этот минимум, называется точкой разреза для отрезка <tex> [i, j] </tex>. Пусть в ячейке <tex> R[i][j] </tex> хранится точка разреза на отрезке <tex> [i, j] </tex>.
 
Тогда такое ''наибольшее'' k, на котором достигается этот минимум, называется точкой разреза для отрезка <tex> [i, j] </tex>. Пусть в ячейке <tex> R[i][j] </tex> хранится точка разреза на отрезке <tex> [i, j] </tex>.
  
 
== Монотонность точки разреза ==
 
== Монотонность точки разреза ==
 +
Для доказательства этого сперва докажем несколько лемм.
 +
 +
{{Определение
 +
| definition=
 +
Функция a удовлетворяет '''неравенству четырехугольника(quadrangle inequation)''', если
 +
: <tex>\forall i \leq i' \leq j \leq j' : a[i][j] + a[i'][j'] \leq a[i'][j] + a[i][j']</tex>
 +
}}
 +
 +
{{Определение
 +
| definition=
 +
Функция a является '''монотонной(monotone)''', если
 +
: <tex>\forall i \leq i' < j \leq j' : a[i][j'] \leq a[i'][j] </tex>
 +
}}
 +
 +
{{Лемма
 +
| statement=
 +
w удовлетворяет неравенству четырехугольника.
 +
| proof=
 +
Заметим, что <tex> w[i][j] = w[i][t] + w[t+1][j] </tex>, так как <tex> w[i][j] </tex> - простая арифметическая сумма. Тогда:
 +
: <tex> w[i][j] + w[i'][j'] \leq w[i'][j] + w[i][j']</tex>
 +
: <tex> (w[i][i' - 1] + w[i'][j]) + (w[i'][j] + w[j + 1][j']) \leq (w[i'][j]) + (w[i][i' - 1] + w[i'][j] + w[j + 1][j']) </tex>
 +
Получили <tex> 0 \leq 0 </tex>, что является верным. Лемма доказана.
 +
}}
 +
 +
{{Лемма
 +
| statement=
 +
Если w удовлетворяет неравенству четырехугольника и монотонна, то D также удовлетворяет неравенству четырехугольника.
 +
| proof=
 +
При <tex> i = i' </tex> или <tex> j = j' </tex>, очевидно, неравенство выполняется.
 +
 +
Рассмотрим два случая:
 +
# i' = j
 +
: i < i' = j < j'. Тогда неравенство четырехугольника
 +
}}
 +
 
{{Теорема
 
{{Теорема
 
| about=
 
| about=
Строка 31: Строка 66:
 
<tex> R[i][j - 1] \leq R[i][j] \leq R[i + 1][j] </tex>
 
<tex> R[i][j - 1] \leq R[i][j] \leq R[i + 1][j] </tex>
 
| proof=
 
| proof=
????
+
Для доказательства этого сперва докажем несколько лемм:
 +
 
 
}}
 
}}

Версия 03:04, 18 декабря 2010

Определение

Определение:
Оптимальный префиксный код с сохранением порядка(англ. order-preserving code, alphabetic code).

Пусть у нас есть алфавит [math] \Sigma [/math]. Каждому символу [math]c_i [/math] сопоставим его код [math] p_i [/math]. Кодирование называется оптимальным префиксным с сохранением порядка, если соблюдаются:

  1. Условие порядка - [math] \forall i, j : c_i \lt c_j \iff p_i \lt p_j [/math]. То есть, если символ [math]c_i [/math] лексикографически меньше символа [math] c_j [/math], его код также будет лексикографически меньше, и наоборот.
  2. Условие оптимальности - [math] \sum\limits_{i = 1}^{|\Sigma|} f_i \cdot |p_i| [/math] - минимально, где [math] f_i [/math] - частота встречаемости символа [math] c_i [/math] в тексте, а [math]|p_i| [/math] - длина его кода.


Алгоритм

Алгоритм нахождения оптимального префиксного кода с сохранением порядка. Решим задачу, используя ДП на подотрезках. Пусть в ячейке [math] D[i][j] [/math] хранится минимальная стоимость кодового дерева для отрезка алфавита от i до j.

Тогда пересчет [math] D[i][j] [/math] будет происходить так:

[math] D[i][j] = \min\limits_{k = i}^{j - 1} \left ( D[i][k] + D[k + 1][j] \right ) + w[i][j][/math]

Базой динамики будет [math] D[i][i] = 0 [/math]

Добавочный член [math]w[i][j] = \sum\limits_{t = i}^{j} f_t [/math] возникает от того что каждым объединением двух подотрезков мы увеличиваем высоту дерева на 1, а значит, и длины всех кодов символов [math] c_i .. c_j [/math] также увеличиваются на 1.

Тогда такое наибольшее k, на котором достигается этот минимум, называется точкой разреза для отрезка [math] [i, j] [/math]. Пусть в ячейке [math] R[i][j] [/math] хранится точка разреза на отрезке [math] [i, j] [/math].

Монотонность точки разреза

Для доказательства этого сперва докажем несколько лемм.


Определение:
Функция a удовлетворяет неравенству четырехугольника(quadrangle inequation), если
[math]\forall i \leq i' \leq j \leq j' : a[i][j] + a[i'][j'] \leq a[i'][j] + a[i][j'][/math]


Определение:
Функция a является монотонной(monotone), если
[math]\forall i \leq i' \lt j \leq j' : a[i][j'] \leq a[i'][j] [/math]


Лемма:
w удовлетворяет неравенству четырехугольника.
Доказательство:
[math]\triangleright[/math]

Заметим, что [math] w[i][j] = w[i][t] + w[t+1][j] [/math], так как [math] w[i][j] [/math] - простая арифметическая сумма. Тогда:

[math] w[i][j] + w[i'][j'] \leq w[i'][j] + w[i][j'][/math]
[math] (w[i][i' - 1] + w[i'][j]) + (w[i'][j] + w[j + 1][j']) \leq (w[i'][j]) + (w[i][i' - 1] + w[i'][j] + w[j + 1][j']) [/math]
Получили [math] 0 \leq 0 [/math], что является верным. Лемма доказана.
[math]\triangleleft[/math]
Лемма:
Если w удовлетворяет неравенству четырехугольника и монотонна, то D также удовлетворяет неравенству четырехугольника.
Доказательство:
[math]\triangleright[/math]

При [math] i = i' [/math] или [math] j = j' [/math], очевидно, неравенство выполняется.

Рассмотрим два случая:

  1. i' = j
i < i' = j < j'. Тогда неравенство четырехугольника
[math]\triangleleft[/math]
Теорема (Монотонность точки разреза):
[math] R[i][j - 1] \leq R[i][j] \leq R[i + 1][j] [/math]
Доказательство:
[math]\triangleright[/math]
Для доказательства этого сперва докажем несколько лемм:
[math]\triangleleft[/math]