词法分析的实验报告.pdfVIP

《词法分析》 实验报告 目录 1 1 实验目的 1、学会针对 DFA 转换图实现相应的高级语言源程序。 2、深刻领会状态转换图的含义，逐步理解有限自动机。 3、掌握手工生成词法分析器的方法，了解词法分析器的内部工作原理。 2 实验内容 2.1 TINY 计算机语言描述 TINY 计算机语言的编译程序的词法分析部分实现。 从左到右扫描每行该语言源程序的符号，拼成单词，换成统一的内部表 示（token）送给语法分析程序。 为了简化程序的编写，有具体的要求如下： 1、数仅仅是整数。 2、空白符仅仅是空格、回车符、制表符。 3、代码是自由格式。 4、注释应放在花括号之内，并且不允许嵌套 ＴＩＮＹ语言的单词 保留字 特殊符号 其他 if + 标识符 2 then - （一个或更多的字母） else * end / repeat = 数 until （一个或更多的数字） read { write } ; 2.2 实验要求 要求实现编译器的以下功能 1、按规则拼单词,并转换成二元式形式 2、删除注 行 3、删除空白符 (空格、回车符、制表符) 4、列表打印源程序，按照源程序的行打印，在每行的前面加上行号，并 且打印出每行包含的记号的二元形式 5、发现并定位错误 词法分析进行具体的要求 1、记号的二元式形式中种类采用枚举方法定义 ；其中保留字和特殊字 符是每个都一个种类，标示符自己是一类，数字是一类 ；单词的属性就是表 3 示的字符串值。 2、词法分析的具体功能实现是一个函数 GetToken()，每次调用都对剩 余的字符串分析得到一个单词或记号识别其种类，收集该记号的符号串属 性，当识别一个单词完毕，采用返回值的形式返回符号的种类，同时采用程 序变量的形式提供当前识别出记号的属性值。这样配合语法分析程序的分 析需要的记号及其属性，生成一个语法树。 3、标示符和保留字的词法构成相同，为了更好的实现，把语言的保留 字建立一个表格存储，这样可以把保留字的识别放在标示符之后，用识别出 的标示符对比该表格，如果存在该表格中则是保留字，否则是一般标示符。 4 3 此法分析器的程序实现 3.1 状态转换图 图 1 TINY 语言的确定有限自动机（DFA） 3.2 程序源码 #includeiostream using namespace std; #includefstream #includestring 5 #includeiomanip class CA { public: void getToken(); //识