Изменения

Перейти к: навигация, поиск

Удаление бесполезных символов из грамматики

11 293 байта добавлено, 19:21, 4 сентября 2022
м
rollbackEdits.php mass rollback
== Порождающие и непорождающие нетерминалы ==
===Описание===
{{Определение
|definition=
Символ '''[[Формальные_грамматики|Нетерминал]] <tex>A</tex>называется ''' называется порождающим'''(англ. 'непорождающим'generating''), если из него не может быть выведена конечная терминальная цепочка. Иначе он называется '''непорождающим'''.}}Очевидно, что если и только если все нетерминалы правой части правила являются порождающими, то порождающим является и нетерминал, стоящий в его левой части. {{Лемма|statement=После удаления из грамматики правил, содержащих непорождающие нетерминалы, язык не изменится.|proof=Непорождающие нетерминалы по определению не могли участвовать в выводе какого-либо слова.
}}
Рассматривая ===Алгоритм==='''Шаг 0'''. Множество порождающих нетерминалов пустое.<br>'''Шаг 1'''. Находим правила грамматики, можно сделать вывод, что если не содержащие нетерминалов в правых частях и только если все нетерминальные символы правой части являются порождающимидобавляем нетерминалы, то порождающим является и символвстречающихся в левых частях таких правил, стоящий в левой частимножество. Последнее утверждение позволяет написать процедуру обнаружения непорождающих символов в следующем виде: <br># Составить список нетерминалов, для которых найдется хотя бы одно правило, правая часть которого не содержит нетерминалов'''Шаг 2'''. # Если найдено такое правило, что все нетерминалы, стоящие в его правой части , уже занесены входят в списокмножество, то добавить добавим в список нетерминалмножество нетерминалы, стоящий стоящие в его левой части. <br># Если на шаге 2 список больше не пополняется'''Шаг 3'''. Повторим предыдущий шаг, то получен список если множество порождающих нетерминалов изменилось.<br>В результате получаем множество всех порождающих нетерминалов грамматики, а все нетерминалы, не попавшие в него, являются непорождающими.
=== Время работы алгоритма ===
Данный алгоритм работает за <tex>O(\left| \Gamma \right| ^ 2)</tex>, где <tex>\left| \Gamma \right|</tex> {{---}} размер грамматики. Однако используя [[Очередь|очередь]] можно ускорить его до <tex>O(\left| \Gamma \right|)</tex>.
 
===Модификация алгоритма с очередью===
Для реализации алгоритма поиска непорождающих нетерминалов будем использовать следующие структуры:
*<tex>\mathrm{isGenerating[nonterm_i]}</tex> {{---}} является ли нетерминал <tex>\mathrm{nonterm_i}</tex> порождающим или нет,
*<tex>\mathrm{counter[rule_i]}</tex> {{---}} счетчик количества нетерминалов, которые ещё не помечены порождающими, для каждого из правил,
*<tex>\mathrm{concernedRules[nonterm_i]}</tex> {{---}} для каждого нетерминала <tex>\mathrm{nonterm_i}</tex> список номеров правил, в правой части которых он встречается,
*<tex>\mathrm{Q}</tex> {{---}} очередь нетерминалов, помеченных порождающими, но ещё не обработанных.
 
Вначале для всех нетерминалов в <tex>\mathrm{isGenerating}</tex> поставим <tex>false</tex>. В <tex>\mathrm{counter}</tex> поставим количество нетерминалов в правой части. Нетерминалы, у которых счётчик <tex>\mathrm{counter}</tex> нулевой, добавим в очередь и отметим их порождающими.<br>
Пока в очереди есть элементы, достаём очередной нетерминал и уменьшаем <tex>\mathrm{counter}</tex> для всех правил из <tex>\mathrm{concernedRules}</tex> для данного нетерминала. Если счётчик количества порождающих терминалов обнулился, то добавим нетерминал, стоящий в левой части данного правила в очередь и пометим его порождающим.<br>
Каждый из нетерминалов попадёт в очередь только один раз, следовательно мы пройдем по списку правил, в правой части которых он встречается, один раз. Таким образом, суммарно получаем <tex>O(\left| \Gamma \right|)</tex>.
 
=== Пример ===
Рассмотрим следующую грамматику: <br>
 
:<tex>
S\rightarrow Ac\\
A\rightarrow SD\\
D\rightarrow aD\\
A\rightarrow a
</tex>
Применяя описанный алгоритм:
# Изначально множество порождающих нетерминалов состоит из одного элемента <tex>A</tex>.
# Добавим в множество нетерминал <tex>S</tex>, так как существует правило <tex>S\rightarrow Ac</tex>, в правой части которого стоят нетерминал <tex>A</tex>, который есть в множестве, и терминал <tex>c</tex>.
# После следующего обхода правил из грамматики множество не изменится.
# Теперь удалим правила <tex>A\rightarrow SD</tex> и <tex>D\rightarrow aD</tex>, так как они содержат нетерминалы, которых нет в полученном множестве.
 
== Достижимые и недостижимые нетерминалы ==
===Описание===
{{Определение
|definition=
Символ '''Нетерминал <tex>A</tex>называется ''' называется достижимым'''(англ. 'недостижимым'reachable'' ) в [[Контекстно-свободные_грамматики,_вывод,_лево-_и_правосторонний_вывод,_дерево_разбора|КС-грамматике ''']] <tex>\Gamma</tex>''', если '''существует порождение <tex>S \Rightarrow^* \alpha A\beta</tex>. Иначе он называется '''недостижимым''' (англ. ''unreachable'' нельзя вывести из стартового нетерминала).
}}
Очевидно, что если нетерминал в левой части правила является достижимым, то и все нетерминалы правой части являются достижимыми.
{{Лемма
|statement=
После удаления из грамматики правил, содержащих недостижимые нетерминалы, язык не изменится.
|proof=
Недостижимые нетерминалы по определению не достижимы из стартового, следовательно они не могли участвовать в выводе какого-либо слова.
}}
===Алгоритм===
'''Шаг 0.''' Множество достижимых нетерминалов состоит из единственного элемента: <tex>\lbrace S \rbrace</tex>.<br>
'''Шаг 1.''' Если найдено правило, в левой части которого стоит нетерминал, содержащийся в множестве, добавим в множество все нетерминалы из правой части.<br>
'''Шаг 2.''' Повторим предыдущий шаг, если множество порождающих нетерминалов изменилось.<br>
Получаем множество всех достижимых нетерминалов, а нетерминалы, не попавшие в него, являются недостижимыми.
 
=== Время работы алгоритма ===
Данный алгоритм работает за <tex>O(\left| \Gamma \right| ^ 2)</tex>, однако используя [[Обход_в_глубину,_цвета_вершин|обход в глубину]] можно ускорить его до <tex>O(\left| \Gamma \right|)</tex>.
 
=== Пример ===
Рассмотрим следующую грамматику:<br>
Рассматривая правила грамматики, можно заметить , что если нетерминал в левой части правила является достижимым , то и все символы правой части являются достижимыми. Это свойство правил является основой процедуры выявления недостижимых символов, которую можно записать так:<tex> S\rightarrow AB|CD\\ A\rightarrow EF\\ G\rightarrow AD\\ C\rightarrow c</tex>Применяя описанный алгоритм: # Образовать одноэлементный списокВозьмём множество, состоящий состоящее из начального символа единственного элемента: <tex>\lbrace S \rbrace</tex>.# Если найдено правилоИз <tex>S</tex> достижимы нетерминалы <tex>A</tex>, левая часть которого уже имеется в списке<tex>B</tex>, то включить <tex>C</tex> и <tex>D</tex>. Добавим их в множество и получим список все символы<tex>\lbrace S, A, B, C, D \rbrace</tex>.# Множество изменилось. Переберём заново правила из грамматики. Из <tex>A</tex> можно вывести <tex>E</tex> и <tex>F</tex>, содержащиеся добавим их в его правой частимножество. # Если на шаге 2 новые нетерминалы Снова переберём правила. Из <tex>C</tex> можно вывести только терминал, а <tex>G</tex> нет в список больше множестве.# После последнего обхода правил грамматики множество не добавляютсяизменилось, значит мы нашли все достижимые нетерминалы: <tex>\lbrace S, A, B, C, D, то получен список всех достижимых нетерминаловE, а нетерминалыF \rbrace</tex>.# Теперь удалим правило <tex>G\rightarrow AD</tex>, не попавшие так как оно содержит в списоклевой части нетерминал, являются недостижимымикоторого нет в полученном множестве.
== Полезные и бесполезные нетерминалы ==
===Описание===
{{Определение
|definition=
Символ '''Нетерминал <tex>A</tex>называется ''' называется полезным'''(англ. 'бесполезным'useful'' ) в КС-грамматике '''<tex>\Gamma</tex>''', если он не может встретиться участвовать в выводе слова , то есть существует порождение вида <tex>S \Rightarrow ^* \alpha A \beta \Rightarrow ^* w</tex>. Иначе он называется '''бесполезным''' (англ. ''useless'').}} {{Теорема|id=th1|statement=Грамматика <tex>\Gamma</tex> не содержит бесполезных нетерминалов тогда и только тогда, когда грамматика <tex>\Gamma</tex> не содержит ни недостижимых нетерминалов, ни непорождающих.|proof=<tex>\Leftarrow</tex><br/>:Очевидно, так как недостижимые и непорождающие нетерминалы являются бесполезными. <tex>\Rightarrow</tex><br/>:Рассмотрим любой нетерминал <tex>A</tex>. Так как он достижим, существуют <tex>\alpha</tex> и <tex>\beta</tex> такие, что <tex>S \Rightarrow ^* \alpha A \beta</tex>. Из того, что любой нетерминал является порождающим, следует, что из любой строки можно вывести строку из терминалов. Значит, существует <tex>\omega \in \Sigma ^ *</tex>: <tex>S \Rightarrow ^* \alpha A \beta \Rightarrow ^* \omega</tex>, и <tex>A</tex> {{---}} не бесполезный.
}}
 
===Алгоритм===
Алгоритм состоит из двух этапов:
# Удалить из грамматики правила, содержащие непорождающие нетерминалы.
# Удалить из грамматики правила, содержащие недостижимые нетерминалы.
 
=== Корректность алгоритма ===
Достаточность данных действий следует из доказанной выше теоремы.
 
{{Теорема
|id=th1
|statement=
Грамматика <tex>\Gamma</tex> не содержит бесполезных символов '''тогда и только тогдаПосле удаления из грамматики правил, содержащих недостижимые нетерминалы, когда''' она не содержит ни недостижимых символов, ни непорождающихпоявятся новые непорождающие нетерминалы.
|proof=
Допустим, что в грамматике появился непорождающий нетерминал <tex>\RightarrowA</tex> Очевидно, т.к. недостижимые и непорождающие символы являются бесполезными.Так как до удаления недостижимых нетерминалов существовал вывод из <tex>\LeftarrowA</tex> Рассмотрим любой нетерминал некоторой конечной цепочки терминалов <tex>A\omega</tex>, то было удалено хотя бы какое-то одно правило из этого вывода. Так как он достижимый, существуют  Пусть <tex>B\rightarrow\alpha</tex> и <tex>\beta</tex>{{---}} правило, такие, что первым из удалённых применяемое в выводе <tex>S A \Rightarrow ^* \alpha A \betaomega</tex>. Из того, что любой сивол является порождающим, следует, что из любой строки можно вывести строку из терминалов. ЗначитОно могло быть удалено только в том случае, существует если в <tex>\omega \in \Sigma ^ *alpha</tex>: присутствуют недостижимые нетерминалы. Но так как было выбрано первое удалённое правило из вывода, то <tex>S \Rightarrow ^* \alpha A \beta \Rightarrow ^* \omegaB</tex>— достижим, следовательно достижимы и все нетерминалы из <tex>A\alpha</tex> - . Значит, это правило не бесполезныймогло быть удалено.
}}
== Литература =Пример === 1. Пусть нам дана грамматика: <br> :<tex> S\rightarrow AS|BS|s \\ E\rightarrow EF|FF \\ A\rightarrow a \\ F\rightarrow f</tex><br>2. Удалим правила, содержащие непорождающие нетерминалы: <br> :<tex> S\rightarrow AS|s \\ E\rightarrow EF|FF \\ A\rightarrow a \\ F\rightarrow f</tex><br>3. Теперь удалим недостижимые нетерминалы:<br> :<tex> S\rightarrow AS|s \\ A\rightarrow a</tex> === Замечание ===Шаги алгоритма нельзя менять местами.  Рассмотрим следующую грамматику: <br> :<tex> S\rightarrow AB|a \\ A\rightarrow b</tex> Все нетерминалы в этой грамматике достижимы. Однако, если удалить <tex>B</tex> как непорождающий, то нетерминал <tex>A</tex> станет недостижимым.== См. также ==* [[Контекстно-свободные_грамматики,_вывод,_лево-_и_правосторонний_вывод,_дерево_разбора|Контекстно-свободные грамматики]]* [[Нормальная_форма_Хомского|Нормальная форма Хомского]] == Источники информации ==* [[wikipedia:Formal_grammar | Wikipedia {{---}} Formal grammar]]* [http://en.wikipedia.org/wiki/Chomsky_normal_form Wikipedia {{---}} Chomsky normal form]* Джон ''ХопкрофтД., Раджив МотваниР., Джеффри УльманД. '' {{---}} Введение в теорию автоматов, языков и вычислений, 2-е изд.: Пер. с англ. — Москва, Издательский дом «Вильямс», 2002. — 528 с. : ISBN 5-8459-0261-4 (рус.) [[Категория: Теория формальных языков]][[Категория: Контекстно-свободные грамматики]][[Категория: Нормальные формы КС-грамматик]]
1632
правки

Навигация