詞法分析器文檔

1、詞法分析程序文檔說明：該詞法分析器實現(xiàn)對C語言源代碼進行詞法分析的功能，由文件輸入，將輸入的源代碼輸出為token序列，用二元組形式由文件和屏幕輸出，文件輸出首先輸入源文件路徑和文件名稱，將注釋過濾，能夠報告不合法字符，并且記錄源代碼的行數(shù)，單詞數(shù)（包括關鍵字，標識符和常量）和字符數(shù)(包括字母，數(shù)字，標點符號，運算符，空格和換行符)。程序設計：具體見源代碼源代碼：#include #include #include #include using namespace std;#define MAX 32char ch = ;int line=1,zifu=1,word=0;/*line記錄行數(shù)z

2、ifu記錄字符數(shù)(包括字母，數(shù)字，標點符號，運算符，空格和換行符)word記錄單詞數(shù)（包括關鍵字，標識符和常量）*/ string key32= auto,break,case,char,const,continue,default,do,double, else,enum,extern,float,for,goto,if,int,long,register, return,short,signed,sizeof,static,struct,switch,typedef, union,unsigned,void,volatile,while ;/c語言中的所有關鍵字int Iskey(stri

3、ng c) /關鍵字判斷 int i; for(i=0; iMAX; i+) if(pare(c)=0) /將字符串與關鍵字一一進行比較 return 1; return 0;int IsLetter(char c) /判斷是否為字母 if(c=a)|(c=A) return 1; else return 0;int IsDigit(char c) /判斷是否為數(shù)字 if(c=0&c=9) return 1; else return 0;void analyse(FILE *fpin,FILE *fpout) string arr=;string str=; while(ch=

4、fgetc(fpin)!=EOF) zifu+;/將文件中的字符逐一進行掃描，包括字母，數(shù)字，標點符號，運算符，空格和換行符 arr=; if(IsLetter(ch)/對開頭是字母或數(shù)字的字符串進行判斷 while(IsLetter(ch)|IsDigit(ch)|ch=_)/符合標識符或者關鍵字標準的字符串進行判斷 if(ch=A) ch=ch+32; arr=arr+ch;/將每個單個讀取的字符連成字符串 ch=fgetc(fpin); fseek(fpin,-1L,SEEK_CUR);/不滿足條件的多讀取的字符回退一格 if (Iskey(arr)/判斷字符串是否是關鍵字 fprint

5、f(fpout,(%s %s)n,arr.c_str(),key); printf(%s %s)n,arr.c_str(),key);word+; else/字符串不是關鍵字則判定為標識符 fprintf(fpout,(%s %s)n,arr.c_str(),id); printf(%s %s)n,arr.c_str(),id);word+; else if(IsDigit(ch)/開頭為數(shù)字的串即為常量 while(IsDigit(ch)|ch=.&IsDigit(fgetc(fpin) arr=arr+ch; ch=fgetc(fpin); fseek(fpin,-1L,SEEK_CUR)

6、; fprintf(fpout,(%s %s)n,arr.c_str(),num); printf(%s %s)n,arr.c_str(),num);word+; else switch(ch)/既不是數(shù)字也不是字母的符號判定 case+: ch=fgetc(fpin);/判定+，+=，+ if(ch=+) fprintf(fpout,(%s %s)n,+,-); printf(%s %s)n,+,-);zifu+; if(ch=) fprintf(fpout,(%s %s)n,+=,-); printf(%s %s)n,+=,-);zifu+; else fprintf(fpout,(%s

7、%s)n,+,-); printf(%s %s)n,+,-); fseek(fpin,-1L,SEEK_CUR); break; case- : ch=fgetc(fpin); if(ch=-)/判定-，-=，- fprintf(fpout,(%s %s)n,-,-); printf(%s %s)n,-,-);zifu+; if(ch=) fprintf(fpout,(%s %s)n,-=,-); printf(%s %s)n,-=,-);zifu+; else fprintf(fpout,(%s %s)n,-,-); printf(%s %s)n,-,-); fseek(fpin,-1L,S

8、EEK_CUR); break; case* : fprintf(fpout,(%s %s)n,*,-); printf(%s %s)n,*,-); break; case= : ch=fgetc(fpin);/判定=，= if(ch=) fprintf(fpout,(%s %s)n,=,-); printf(%s %s)n,=,-);zifu+; else fprintf(fpout,(%s %s)n,=,EQ); printf(%s %s)n,=,EQ); fseek(fpin,-1L,SEEK_CUR); break; case/ : ch=fgetc(fpin);/判定是注釋還是運算符

9、/ if(ch=*)/形如/* */的注釋，將注釋過濾 zifu-; ch=fgetc(fpin); while(ch!=*)&(ch=fgetc(fpin)=/) ; else if(ch=/)/形如/的注釋，將注釋過濾 zifu-; ch=fgetc(fpin); while(ch!=n) ch=fgetc(fpin);line+; else fprintf(fpout,(%s %s)n,/,-); printf(%s %s)n,/,-); fseek(fpin,-1L,SEEK_CUR); break; case %: fprintf(fpout,(%s %s)n,%,-); print

10、f(%s %s)n,%,-); break; case #: fprintf(fpout,(%s %s)n,#,-); printf(%s %s)n,#,-); break; case !: ch=fgetc(fpin);/判定！=還是！ if(ch=) fprintf(fpout,(%s %s)n,!=,-); printf(%s %s)n,!=,-);zifu+; else fprintf(fpout,(%s %s)n,!,-); printf(%s %s)n,!,-); fseek(fpin,-1L,SEEK_CUR); break; case |: ch=fgetc(fpin); if

11、(ch=|)/判定|還是| fprintf(fpout,(%s %s)n,|,-); printf(%s %s)n,|,-);zifu+; else fprintf(fpout,(%s %s)n,|,-); printf(%s %s)n,|,-); fseek(fpin,-1L,SEEK_CUR); break; case &: ch=fgetc(fpin); if(ch=&)/判定&還是& fprintf(fpout,(%s %s)n,&,-); printf(%s %s)n,&,-);zifu+; else fprintf(fpout,(%s %s)n,&,-); printf(%s %s

12、)n,&,-); fseek(fpin,-1L,SEEK_CUR); break; case( : fprintf(fpout,(%s %s)n,(,-); printf(%s %s)n,(,-); break; case) : fprintf(fpout,(%s %s)n,),-); printf(%s %s)n,),-); break; case : fprintf(fpout,(%s %s)n,-); printf(%s %s)n,-); break; case : fprintf(fpout,(%s %s)n,-); printf(%s %s)n,-); break; case; :

13、fprintf(fpout,(%s %s)n,;,-); printf(%s %s)n,;,-); break; case. : fprintf(fpout,(%s %s)n,.,-); printf(%s %s)n,.,-); break; case, : fprintf(fpout,(%s %s)n,-); printf(%s %s)n,-); break; case : fprintf(fpout,(%s %s)n,-); printf(%s %s)n,-); break; case : fprintf(fpout,(%s %s)n,-); printf(%s %s)n,-); brea

14、k; case :fprintf(fpout,(%s %s)n,引號,-); printf(%s %s)n,引號,-); break; case ?: fprintf(fpout,(%s %s)n,?,-); printf(%s %s)n,?,-); break; case: : fprintf(fpout,(%s %s)n,:,-); printf(%s %s)n,:,-); break; case : ch=fgetc(fpin); if(ch=)/判定=還是 fprintf(fpout,(%s %s)n,=,GE); printf(%s %s)n,=,GE);zifu+; else fp

15、rintf(fpout,(%s %s)n,GT); printf(%s %s)n,GT); fseek(fpin,-1L,SEEK_CUR); break; case : ch=fgetc(fpin);/判定=還是還是 if(ch=) fprintf(fpout,(%s %s)n,=,LE); printf(%s %s)n,) fprintf(fpout,(%s %s)n,NE); printf(%s %s)n,NE); zifu+; else fprintf(fpout,(%s %s)n,LT); printf(%s %s)n,LT); fseek(fpin,-1L,SEEK_CUR); break; case : break; case n: line+;/每讀到n，記錄行數(shù) break; default : fprintf(fpout,(%c %s)n,ch,不合法); printf(%c %s)n,ch,不合法); break; int main() char in_fn30; FILE * fpin,*fpout; fpout = fopen(playov