Алгоритм Касаи и др.

НЕТ ВОЙНЕ

24 февраля 2022 года российское руководство во главе с Владимиром Путиным развязало агрессивную войну против Украины. В глазах всего мира это военное преступление совершено от лица всей страны, всех россиян. Будучи гражданами Российской Федерации, мы против своей воли оказались ответственными за нарушение международного права, военное вторжение и массовую гибель людей. Чудовищность совершенного преступления не оставляет возможности промолчать или ограничиться пассивным несогласием. Мы убеждены в абсолютной ценности человеческой жизни, в незыблемости прав и свобод личности. Режим Путина — угроза этим ценностям. Наша задача — обьединить все силы для сопротивления ей. Эту войну начали не россияне, а обезумевший диктатор. И наш гражданский долг — сделать всё, чтобы её остановить. Антивоенный комитет России

Распространяйте правду о текущих событиях, оберегайте от пропаганды своих друзей и близких. Изменение общественного восприятия войны - ключ к её завершению.

meduza.io, Популярная политика, Новая газета, zona.media, Майкл Наки.

Алгоритм Касаи, Аримуры, Арикавы, Ли, Парка (англ. Kasai, Arimura, Arikawa, Lee, Park algorithm) — алгоритм, позволяющий за линейное время вычислить длину наибольших общих префиксов (англ. longest common prefix, LCP) для всех соседних суффиксов строки, отсортированных в лексикографическом порядке.

Обозначения

Введём следующие обозначения:

• [math]S[/math] — данная строка.
• [math]S_{i}[/math] — суффикс строки [math]S[/math], начинающийся в [math]i[/math]-ом символе.
• [math]Suf[/math] — суффиксный массив.
• [math]Suf^{-1}[/math] — массив, обратный суффиксному, который может быть получен немедленно, если задан массив [math]Suf[/math]. Если [math]Suf[k] = i[/math], то [math]Suf^{-1}[i] = k[/math].
• [math]LCP(S_{Suf[x]}, S_{Suf[z]})[/math] — длина наибольшего общего префикса строк [math]S_{Suf[x]}[/math] и [math]S_{Suf[z]}[/math].
• [math]lcp[i][/math] — длина наибольшего общего префикса соседних строк [math]i-1[/math] и [math]i[/math], то есть [math]lcp[i] = LCP(S_{Suf[i-1]}, S_{Suf[i]})[/math].

Некоторые свойства LCP

Утверждение (№1):

[math]LCP(S_{Suf[y - 1]}, S_{Suf[y]}) \geqslant LCP(S_{Suf[x]},S_{Suf[z]}), x \lt y \leqslant z[/math]

[math]\triangleright[/math]

[math]LCP[/math] между двумя суффиксами — минимум [math]LCP[/math] всех пар соседних суффиксов между ними в суффиксном массиве [math]Suf[/math]. То есть [math]LCP(S_{Suf[x]}, S_{Suf[z]}) = \min\limits_{x \lt y \leqslant z}LCP(S_{Suf[y - 1]},S_{Suf[y]})[/math]. Отсюда следует, что [math]LCP[/math] пары соседних суффиксов в массиве [math]Suf[/math] больше или равно [math]LCP[/math] пары суффиксов, окружающих их.

[math]\triangleleft[/math]

Также заметим, что [math]LCP(S_{Suf[x]}, S_{Suf[z]}) = \min\limits_{i = x + 1 \ldots z}lcp[i][/math].

Утверждение (№2):

Если [math]LCP(S_{Suf[x-1]} , S_{Suf[x]}) \gt 1[/math], тогда [math]Suf^{-1}[Suf[x - 1] + 1] \lt Suf^{-1}[Suf[x] + 1][/math]

[math]\triangleright[/math]

Рассмотрим пару суффиксов, соседних в массиве [math]Suf[/math]. Тогда если их значение [math]LCP[/math] больше [math]1[/math], то можно удалить первый символ этих суффиксов и их лексикографический порядок относительно друг друга сохранится. То есть строка [math]S_{Suf[x] + 1}[/math] будет идти следом за строкой [math]S_{Suf[x-1] + 1}[/math] и останется лексикографически больше нее.

[math]\triangleleft[/math]

Утверждение (№3):

Если [math]LCP(S_{Suf[x-1]} , S_{Suf[x]} ) \gt 1[/math], тогда [math]LCP(S_{Suf[x-1]+1} , S_{Suf[x]+1}) = LCP(S_{Suf[x-1]} , S_{Suf[x]} ) - 1[/math]

[math]\triangleright[/math]

В этом же случае, значение [math]LCP[/math] между [math]S_{Suf[x-1]+1}[/math] и [math]S_{Suf[x]+1}[/math] на один меньше значения [math]LCP[/math] между [math]S_{Suf[x-1]}[/math] и [math]S_{Suf[x]}[/math].

[math]\triangleleft[/math]

Пример

Пояснительная картинка к утверждениям 2 и 3

Рассмотрим строку [math]S = aabaaca\$[/math]. Её суффиксный массив:

[math]i[/math]	[math]0[/math]	[math]1[/math]	[math]2[/math]	[math]3[/math]	[math]4[/math]	[math]5[/math]	[math]6[/math]	[math]7[/math]
[math]Suf[i][/math]	[math]7[/math]	[math]6[/math]	[math]0[/math]	[math]3[/math]	[math]1[/math]	[math]4[/math]	[math]2[/math]	[math]5[/math]

Распишем суффиксный массив по столбикам для удобного нахождения [math]LCP[/math]:

[math]i[/math]	[math]0[/math]	[math]1[/math]	[math]2[/math]	[math]3[/math]	[math]4[/math]	[math]5[/math]	[math]6[/math]	[math]7[/math]
[math]Suf[i][/math]	[math]7[/math]	[math]6[/math]	[math]0[/math]	[math]3[/math]	[math]1[/math]	[math]4[/math]	[math]2[/math]	[math]5[/math]
[math]0[/math]	[math]\$[/math]	[math]a[/math]	[math]a[/math]	[math]a[/math]	[math]a[/math]	[math]a[/math]	[math]b[/math]	[math]c[/math]
[math]1[/math]		[math]\$[/math]	[math]a[/math]	[math]a[/math]	[math]b[/math]	[math]c[/math]	[math]a[/math]	[math]a[/math]
[math]2[/math]			[math]b[/math]	[math]c[/math]	[math]a[/math]	[math]a[/math]	[math]a[/math]	[math]\$[/math]
[math]3[/math]			[math]a[/math]	[math]a[/math]	[math]a[/math]	[math]\$[/math]	[math]c[/math]
[math]4[/math]			[math]a[/math]	[math]\$[/math]	[math]c[/math]		[math]a[/math]
[math]5[/math]			[math]c[/math]		[math]a[/math]		[math]\$[/math]
[math]6[/math]			[math]a[/math]		[math]\$[/math]
[math]7[/math]			[math]\$[/math]

Строим массив [math]LCP[/math]:

[math]i[/math]	[math]0[/math]	[math]1[/math]	[math]2[/math]	[math]3[/math]	[math]4[/math]	[math]5[/math]	[math]6[/math]	[math]7[/math]
[math]lcp[i][/math]	[math]\bot[/math]	[math]0[/math]	[math]1[/math]	[math]2[/math]	[math]1[/math]	[math]1[/math]	[math]0[/math]	[math]0[/math]

Например [math]lcp[3] = 2[/math] — длина наибольшего общего префикса [math]aa[/math] суффиксов [math]S_{Suf[2]} = aabaaca\$[/math] и [math]S_{Suf[3]} = aaca\$[/math].

Вспомогательные утверждения

Теперь рассмотрим следующую задачу: рассчитать [math]LCP[/math] между суффиксом [math]S_{i}[/math] и его соседним суффиксом в массиве [math]Suf[/math], при условии, что значение [math]LCP[/math] между [math]S_{i-1}[/math] и его соседним суффиксом известны. Для удобства записи пусть [math]p=Suf^{-1}[i - 1][/math] и [math]q = Suf^{-1}[i][/math]. Так же пусть [math]j - 1 = Suf[p-1][/math] и [math]k = Suf[q - 1][/math]. Проще говоря, мы хотим посчитать [math]lcp[q][/math], когда задано [math]lcp[p][/math].

Лемма:

Если [math]LCP(S_{j-1}, S_{i-1}) \gt 1[/math], тогда [math]LCP(S_k,S_i) \geqslant LCP(S_j,S_i)[/math].

Доказательство:

[math]\triangleright[/math]

Так как [math]LCP(S_{j-1},S_{i-1}) \gt 1[/math], имеем [math]Suf^{-1}[j] \lt Suf^{-1}[i][/math] из утверждения №2. Так как [math]Suf^{-1}[j] \leqslant Suf^{-1}[k] = Suf^{-1}[i] - 1[/math], имеем [math]LCP(S_{k} , S_{i}) \geqslant LCP(S_{j} , S_{i})[/math] из утверждения №1.

[math]\triangleleft[/math]

Теорема:

Если [math]lcp[p] = LCP(S_{j-1}, S_{i-1}) \gt 1[/math], то [math]lcp[q] = LCP(S_{k}, S_{i}) \geqslant lcp[p] - 1[/math]

Доказательство:

[math]\triangleright[/math]

[math]LCP(S_{k}, S_{i}) \geqslant LCP(S_{j} , S_{i})[/math] (по лемме). [math]LCP(S_{j} , S_{i}) = LCP(S_{j-1}, S_{i-1}) - 1[/math] (по утверждению №3). Значит, [math]LCP(S_{k}, S_{i}) \geqslant LCP(S_{j-1}, S_{i-1}) - 1[/math].

[math]\triangleleft[/math]

Алгоритм

Представим алгоритм [math]\mathrm{buildLCP}[/math] который вычисляет массив [math]LCP[/math], зная суффиксный массив. Исходя из выше написанной теоремы, нам не нужно сравнивать все символы, когда мы вычисляем [math]LCP[/math] между суффиксом [math]S_{i}[/math] и его соседним суффиксом в массиве [math]Suf^{-1}[/math]. Чтобы вычислить [math]LCP[/math] всех соседних суффиксов в массиве [math]Suf^{-1}[/math] эффективно, будем рассматривать суффиксы по порядку начиная с [math]S_1[/math] и заканчивая [math]S_n[/math].

Псевдокод

Алгоритм принимает на вход строку длиной [math]n[/math], с добавленным специальным символом [math]\$[/math] и суффиксный массив этой строки, и возвращает массив [math]lcp[/math].

int[] buildLCP(str: string, suf: int[])
   int n [math]=[/math] str.length
   int[len] lcp
   int[len] pos   // pos[] — массив, обратный массиву suf 
   for i = 0 to n - 1
      pos[suf[i]] [math]=[/math] i
   int k [math]=[/math] 0
   for i = 0 to n - 1
      if k > 0
         k--  
      if pos[i] == n - 1
         lcp[n - 1] [math]=[/math] -1
         k [math]=[/math] 0
         continue
      else
         int j [math]=[/math] suf[pos[i] + 1]
         while max(i + k, j + k) < n and str[i + k] == str[j + k]
            k++
         lcp[pos[i]] [math]=[/math] k
   return lcp

Асимптотика

Таким образом, начиная проверять [math]LCP[/math] для текущего суффикса не с первого символа, а с указанного, можно за линейное время построить [math]LCP[/math]. Покажем, что построение [math]LCP[/math] таким образом действительно требует [math]O(n)[/math] времени. Действительно, на каждой итерации текущее значение [math]LCP[/math] может быть не более чем на единицу меньше предыдущего. Таким образом, значения [math]LCP[/math] в сумме могут увеличиться не более, чем на [math]2n[/math] (с точностью до константы). Следовательно, алгоритм построит [math]LCP[/math] за [math]O(n)[/math].

См. также

• Алгоритм цифровой сортировки суффиксов циклической строки

Источники информации

• Википедия — Алгоритм Касаи
• T.Kasai, G.Lee, H.Arimura, S.Arikawa, K.Park - Linear-Time Longest-Common-Prefix Computation in Suffix Arrays and Its Application