第三章词法分析及其自动构造 词法分析程序的设计原则,单词的描述技术,识别机制及词法分析程序的自动构造原理

3.1 对于词法分析器的要求 3.2 词法分析器的设计 3.3 正规表达式与有限自动机 3.4 词法分析器的自动产生--LEX

一、词法分析与词法分析程序 1.词法分析的任务是识别源程序中具有独立含义的最小语法单位-符号或单词,如 标识符,无正负号常数与界限符等。并把源程序转换为等价的内部表示形式 2.功能: 读入源程序字符串;识别单词(符号); 转换成属性字; 一些其他的简单工作:删除注解,预加工处理

词法分析器从输入串中识别单词，编译程序对源程序的分析由此开始。单词构词规则可由状态转换图表示，手工编程实现这些状态转换图，便可产生高效的词法分析器。构词规则也可由正规式表示，据此转换成识别单词的有限自动机，这就得到了识别单词的状态转换图。软件工具Lex能实现这种转换

 词法分析的作用  词法单元的规约（正则表达式）  词法单元的识别（状态转换图）  有穷自动机  词法分析器生成工具及设计

• 词法分析器的作用 • 词法单元的规约 (正则表达式) • 词法单元的识别 (状态转换图) • 词法分析器生成工具及设计 • 有穷自动机

• 词法分析器的作用 • 词法单元的规约 (正则表达式) • 词法单元的识别 (状态转换图) • 词法分析器生成工具及设计 • 有穷自动机

– 词法分析器：把构成源程序的字符流翻译成记号流，还完成和用户接口的一些任务 – 围绕词法分析器的自动生成展开 – 介绍正规式、状态转换图和有限自动机概念

编译逻辑过程 一、词法分析 二、语法分析 三、语义分析 四、中间代码生成 五、中间代码优化 六、目标代码生成 七、目标代码优化

课程内容 一、文法/语言/自动机 二、词法分析技术 三、语法分析技术 四、语义分析技术 五、代码生成和优化技术