- •Министерство образования и науки рф
- •Основы построения трансляторов Курс лекций по дисциплине «Системное программное обеспечение» Красноярск 2010 г.
- •1. Место трансляторов в системном программном обеспечении. Основные фазы процесса трансляции
- •Генерация промежуточного представления
- •Генерация кода
- •Контрольные вопросы
- •2. Базовые понятия теории формальных языков и грамматик
- •2.1. Алфавиты, цепочки и языки. Основные понятия и определения
- •2.2. Представление языков
- •2.3. Грамматики
- •2.3.1. Формальное определение грамматики
- •2.3.2. Классификация грамматик и языков по Хомскому
- •2.3.3. Разбор цепочек
- •2.3.4. Преобразования грамматик
- •2.4. Задачи
- •3. Лексический анализ
- •Описание модельного языка
- •3.1. Сущность и задачи лексического анализа
- •3.2. Способы организации таблиц идентификаторов
- •Организация таблицы идентификаторов в виде неупорядоченного массива записей. Метод линейного поиска.
- •Организация таблицы идентификаторов в виде упорядоченного массива записей. Метод бинарного поиска.
- •Использование бинарного дерева поиска для построения таблицы идентификаторов.
- •Построение таблиц идентификаторов с использованием методов хеширования.
- •3.3. Методы и средства лексического анализа
- •3.4. Недетерминированный разбор
- •3.5 Разработка лексического анализатора для модельного языка Описание модельного паскалеподобного языка (м-языка):
- •Контрольные вопросы
- •4. Синтаксический и семантический анализ
- •4.1. Задачи и методы синтаксического анализа
- •4.2 Сущность метода рекурсивного спуска
- •Void error(); / функция обработки ошибок /
- •4.3. Условия применимости метода рекурсивного спуска
- •4.4. Синтаксический анализатор для м-языка
- •4.5. Семантический анализ
- •4.6. Семантический анализатор для м-языка
- •4.6.1. Обработка описаний
- •Int declare; / описан ? 1-"да", 0-"нет" /
- •Void ipush (int I); / значение I - в стек /
- •Int ipop (void); / из стека - целое /
- •4.6.2. Контроль контекстных условий в выражении
- •Void spush (char s); / значение s - в стек /
- •If (tid [I].Declare) / описан? /
- •4.6.3. Контроль контекстных условий в операторах
- •4.7. Задачи
- •5. Генерация внутреннего представления программ
- •5.1. Язык внутреннего представления программы
- •5.2 Синтаксически управляемый перевод
- •5.3 Генератор внутреннего представления программы на м-языке
- •5.4 Интерпретатор полиЗа для модельного языка
- •5.5 Задачи
- •Литература
2.3.4. Преобразования грамматик
В некоторых случаях КС-грамматика может содержать недостижимые и бесплодные символы, которые не участвуют в порождении цепочек языка и поэтому могут быть удалены из грамматики.
Символ x (VT VN) называется недостижимым в грамматике G = (VT, VN, P, S), если он не появляется ни в одной сентенциальной форме этой грамматики.
Алгоритм удаления недостижимых символов:
На входе имеется КС-грамматика G = (VT, VN, P, S).
На выходе получаем КС-грамматику G’ = (VT’, VN’, P’, S), не содержащую недостижимых символов, для которой L(G) = L(G’).
Рекурсивно строим множества V0, V1, ...
Шаг 1. V0 = {S}; i = 1.
Шаг 2. Vi = {x | x (VT VN), в P есть A x и A Vi-1} Vi-1.
Шаг 3. Если Vi Vi-1, то i := i+1 и переходим к шагу 2;
иначе VN’=Vi VN; VT’ = Vi VT; P’ состоит из правил множества P, содержащих только символы из Vi; G’ = (VT’, VN’, P’, S).
Символ A VN называется бесплодным в грамматике G =(VT, VN, P, S), если множество { VT* | A } пусто.
Алгоритм удаления бесплодных символов:
На входе имеется КС-грамматика G = (VT, VN, P, S).
На выходе получаем КС-грамматику G’ = (VT, VN’, P’, S), не содержащую бесплодных символов, для которой L(G) = L(G’).
Рекурсивно строим множества N0, N1, ...
Шаг 1. N0 = , i = 1.
Шаг 2. Ni = {A | (A ) P и (Ni-1 VT)*} Ni-1.
Шаг 3. Если Ni Ni-1, то i := i+1 и переходим к шагу 2;
иначе VN’ = Ni; P’ состоит из правил множества P, содержащих только символы из VN’ VT; G’ = (VT, VN’, P’, S).
КС-грамматика G называется приведенной, если в ней нет недостижимых и бесплодных символов.
Алгоритм приведения грамматики:
обнаруживаются и удаляются все бесплодные нетерминалы;
обнаруживаются и удаляются все недостижимые символы.
Удаление символов сопровождается удалением правил вывода, содержащих эти символы.
Замечание: если в этом алгоритме переставить шаги (1) и (2), то не всегда результатом будет приведенная грамматика.
Для описания синтаксиса языков программирования стараются использовать однозначные приведенные КС-грамматики.
2.4. Задачи
Замечание: если при описании грамматики указаны только правила вывода Р, то будем считать, что большие латинские буквы обозначают нетерминальные символы, S - цель грамматики, все остальные символы - терминальные.
1. Дана грамматика. Построить вывод заданной цепочки.
1) S T | T+S | T-S 2) S aSBC | abC
T F | FT CB BC
F a | b bB bb
Цепочка a-ba+b . bC bc
cC cc
Цепочка aaabbbccc .
2. Построить все сентенциальные формы для грамматики с правилами:
S A+B | B+A
A a
B b
3. Какой язык порождается грамматикой с правилами:
1) S APA 2) S aQb |
P + | - Q cSc
A a | b
3) S 1B 4) S A | SA | SB
B B0 | 1 A a
B b
4. Построить грамматику, порождающую язык :
L = {an bm | n, m 1};
L = {ccc | , , - любые цепочки из a и b};
L = {a1 a2 ... an an ... a2 a1 | ai = 0 или 1, n 1};
L = {an bm | n m ; n, m 0};
L = {цепочки из 0 и 1 с неравным числом 0 и 1};
L = { | {a,b}+};
L = { | {0,1}+ и содержит равное количество 0 и 1, причем любая подцепочка, взятая с левого конца, содержит единиц не меньше, чем нулей};
L = {(a2m bm)n | m 1, n 0};
L = {
| n 1};L = {
| n 1};L = {
|
n
1}.
5. К какому типу по Хомскому относится грамматика с правилами:
1) S a | Ba 2) S Ab
B Bb | b A Aa | ba
3) S 0A1 | 01 4) S AB
0A 00A1 AB BA
A 01 A a
B b
6. Эквивалентны ли грамматики с правилами :
1) S AB и S AS | SB | AB
A a | Aa A a
B b | Bb B b
2) S aSL | aL и S aSBc | abc
L Kc cB Bc
cK Kc bB bb
K b
7. Построить КС-грамматику, эквивалентную грамматике с правилами:
1) S aAb 2) S AB | ABS
aA aaAb AB BA
A BA AB
A a
B b
8. Построить регулярную грамматику, эквивалентную грамматике с правилами:
1) S A | AS 2) S A.A
A a | bb A B | BA
B 0 | 1
9. Доказать, что грамматика с правилами:
S aSBC | abC
CB BC
bB bb
bC bc
cC cc
порождает язык L = {an bn cn | n 1}.
Для этого показать, что в данной грамматике выводится любая цепочка вида an bn cn (n 1) и не выводятся никакие другие цепочки.
10. Дана грамматика с правилами:
1) S S0 | S1 | D0 | D1 2) S if B then S | B = E
D H. B | B + E
H 0 | 1 | H0 | H1 B a | b
Построить восходящим и нисходящим методами дерево вывода для цепочки:
10.1001
if a then b = a+b+b
11. Определить тип грамматики. Описать язык, порождаемый этой грамматикой. Написать для этого языка КС-грамматику.
S P
P 1P1 | 0P0 | T
T 021 | 120R
R1 0R
R0 1
R 1
12. Построить регулярную грамматику, порождающую цепочки в алфавите {a, b}, в которых символ a не встречается два раза подряд.
13. Написать КС-грамматику для языка L, построить дерево вывода и левосторонний вывод для цепочки aabbbcccc.
L = {a2n bm c2k | m=n+k, m>1}.
14. Построить грамматику, порождающую сбалансированные относительно круглых скобок цепочки в алфавите { a, ( , ), }. Сбалансированную цепочку определим рекуррентно: цепочка сбалансирована, если
не содержит скобок;
= (1) или = 1 2, где 1 и 2 сбалансированы.
15. Написать КС-грамматику, порождающую язык L, и вывод для цепочки aacbbbcaa в этой грамматике.
L = {an cbm can | n, m>0}.
16. Написать КС-грамматику, порождающую язык L, и вывод для цепочки 110000111 в этой грамматике.
L = {1n 0m 1p | n+p>m; n, p, m>0}.
17. Дана грамматика G. Определить ее тип; язык, порождаемый этой грамматикой; тип языка.
G: S 0A1
0A 00A1
A
18. Дан язык L = {13n+2 0n | n0}. Определить его тип, написать грамматику, порождающую L. Построить левосторонний и правосторонний выводы, дерево разбора для цепочки 1111111100.
19. Привести пример грамматики, все правила которой имеют вид A Bt, либо A tB, либо A t, для которой не существует эквивалентной регулярной грамматики.
20. Написать общие алгоритмы построения по данным КС-грамматикам G1 и G2, порождающим языки L1 и L2, КС-грамматики для
L1L2;
L1 L2;
L1*
Замечание: L = L1 L2 - это конкатенация языков L1 и L2 то есть L = { | L1, L2}; L = L1* - это итерация языка L1, то есть объединение {} L1 L1L1L1L1L1
21. Написать КС-грамматику для
L={i 2 i+1R | i N, i=(i)2 - двоичное представление числа i,
R - обращение цепочки .
Написать КС-грамматику для языка L* (см. задачу 20).
22. Показать, что грамматика
E+E | EE | (E) | i
неоднозначна. Как описать этот же язык с помощью однозначной грамматики?
23. Показать, что наличие в КС-грамматике правил вида
A AA |
A AA |
A A | A | ,
где ,, (VTVN)*, A VN, делает ее неоднозначной. Можно ли преобразовать эти правила таким образом, чтобы полученная эквивалентная грамматика была однозначной?
24. Показать, что грамматика G неоднозначна.
G: S abC | aB
B bc
bC bc
25. Дана КС-грамматика G={VT, VN, P, S}.
Предложить алгоритм построения множества X={A VN | A }.
26. Для произвольной КС-грамматики G предложить алгоритм, определяющий, пуст ли язык L(G).
27. Написать приведенную грамматику, эквивалентную данной.
1) S aABS | bCACd 2) S aAB | E
A bAB | cSA | cCC A dDA |
B bAB | cSB B bE | f
C cS | c C cAB | dSD | a
D eA
fA | g
28. Язык называется распознаваемым, если существует алгоритм, который за конечное число шагов позволяет получить ответ о принадлежности любой цепочки языку. Если число шагов зависит от длины цепочки и может быть оценено до выполнения алгоритма, язык называется легко распознаваемым. Доказать, что язык, порождаемый неукорачивающей грамматикой, легко распознаваем.
29. Доказать, что любой конечный язык, в который не входит пустая цепочка, является регулярным языком.
30. Доказать, что нециклическая КС-грамматика порождает конечный язык. Нетерминальный символ A VN - циклический, если в грамматике существует A 1 A 2 . КС-грамматика называется циклической, если в ней имеется хотя бы один циклический символ.
31. Показать, что условие цикличности грамматики (см. задачу 30) не является достаточным условием бесконечности порождаемого этой грамматикой языка.
32. Доказать, что язык, порождаемый циклической приведенной КС-грамматикой, содержащей хотя бы один эффективный циклический символ, бесконечен. Циклический символ называется эффективным, если A A, где |A| > 1; иначе циклический символ называется фиктивным.
