实验一(词法分析)1

《实验一(词法分析)1》由会员上传分享，免费在线阅读，更多相关内容在行业资料-天天文库。

1、实验一词法分析一．实验目的1、学会针对DFA转换图实现相应的高级语言源程序。2、深刻领会状态转换图的含义，逐步理解有限自动机。3、掌握手工生成词法分析器的方法，了解词法分析器的内部工作原理。二．实验内容TINY计算机语言的编译程序的词法分析部分实现。从左到右扫描每行该语言源程序的符号，拼成单词，换成统一的内部表示（token）送给语法分析程序。为了简化程序的编写，有具体的要求如下：（1）数仅仅是整数。（2）空白符仅仅是空格、回车符、制表符。（3）代码是自由格式。（4）注释应放在花括号之内，并且不允许嵌套三．实验要

2、求要求实现编译器的以下功能：（1）按规则拼单词,并转换成二元式形式（2）删除注释行（3）删除空白符(空格、回车符、制表符)（4）列表打印源程序，按照源程序的行打印，在每行的前面加上行号，并且打印出每行包含的记号的二元形式（5）发现并定位错误，词法分析进行具体的要求：（1）记号的二元式形式中种类采用枚举方法定义；其中保留字和特殊字符是每个都一个种类，标示符自己是一类，数字是一类；单词的属性就是表示的字符串值。（2）词法分析的具体功能实现是一个函数GetToken()，每次调用都对剩余的字符串分析得到一个单词或记号识

3、别其种类，收集该记号的符号串属性，当识别一个单词完毕，采用返回值的形式返回符号的种类，同时采用程序变量的形式提供当前识别出记号的属性值。这样配合语法分析程序的分析需要的记号及其属性，生成一个语法树。（3）标示符和保留字的词法构成相同，为了更好的实现，把语言的保留字建立一个表格存储，这样可以把保留字的识别放在标示符之后，用识别出的标示符对比该表格，如果存在该表格中则是保留字，否则是一般标示符。源程序：/*注意：测试时把测试的源程序存入当前目录中，并改名为source.txt*/#include#

4、include#include#include#includeusingnamespacestd;enumWordType{WRONG,NUMBER,BIAOSHI,IF,THEN,ELSE,END,REPEAT,UNTIL,//9READ,WRITE,PLUS,SUBTRACT,MULTIPLY,DIVIDEY,EQUAL,LESSTHAN,COLON,//18ASSIGNMENT,LINE_FEED,SPACE,TAB,BRACKET_L,

5、BRACKET_R};//24enumCharType{ALPHABET,OTHER};enumWrongType{ZERO,ALP_NUM,NUM_ALP,UNLEAGL_S,NO_MATCH,UNKNOW};char*Words[]={"wrong","number","biaoshi","if","then","else","end","repeat","until",//9"read","write","+","-","*","/","=","<",":",//18":=","","","","{",

6、"}"};//24typedefstruct{char*str;intwordtype;}Two;charArrayChar[100],cbuffer;inti=-1,numline=1,wordtype;stringLineChar;TwoT;ifstreamfp("source.txt",ios::in);intmain(){voidHandleAlphabet();voidHandleNumber();voidHandleOther();if(!fp)cout<<"文件打开错误！！"<

7、cout<

8、;numline++;LineChar="";fp.get(cbuffer);}elseif(cbuffer=='')//忽略空字符{LineChar+="";fp.get(cbuffer);}elseif(cbuffer=='')//忽略制表符{LineChar+="";fp.get(cbuffer);}elseif(isalpha(cbuffer))//判断是否是字母