编译原理实验一——简单词法分析

原创 2006年05月31日 19:48:00

[实验任务]
完成以下正则文法所描述的Pascal语言子集单词符号的词法分析程序。
<标识符>→字母︱ <标识符>字母︱ <标识符>数字
    <无符号整数>→数字︱ <无符号整数>数字
    <单字符分界符> →+ ︱- ︱* ︱; ︱(︱)
    <双字符分界符>→<大于>=︱<小于>=︱<小于>>︱<冒号>=︱<斜竖>*
    <小于>→<                   
<等于>→=
<大于>→>
<冒号> →:
<斜竖> →/
该语言的保留字 :begin  end  if  then  else  for  do  while  and or not   说明: 1 该语言大小写不敏感。
     2 字母为a-z A-Z,数字为0-9。
3可以对上述文法进行扩充和改造。
4 ‘/*……*/’为程序的注释部分。
[设计要求]
1、给出各单词符号的类别编码。
2、词法分析程序应能发现输入串中的错误。
3、词法分析作为单独一遍编写,词法分析结果为二元式序列组成的中间文件。
4、设计两个测试用例(尽可能完备),并给出测试结果。 

demo.cpp

#include <stdio.h>
#include <ctype.h>
#include <string.h>
#include "demo.h"

char token[20];

int lookup(char *token) {
 for (int i = 0; i < 11; i++) {
  if (strcmp(token, KEY_WORDS[i]) == 0) {
   return i+1;
  }
 }

 return 0;
}

char getletter(FILE *fp) {
 return tolower(fgetc(fp));
}

void out(FILE *fp, int c, char *value) {
 fprintf(fp, "%d,%s/n", c, value);
}

void report_error(FILE *fp, char ch) {
 fprintf(fp, "There must be some error./n");
 fprintf(fp, "%c.../n", ch);
 fprintf(fp, "^/n");
}

void scanner(FILE *infile, FILE *outfile) {
 char ch;
 int i, c;
 do {
  do {
   ch = getletter(infile);
  } while(isspace(ch));
  if (isalpha(ch)) {
   token[0] = ch;
   ch = getletter(infile);
   i = 1;
   while (isalnum(ch)) {
    token[i] = ch;
    i++;
    ch = getletter(infile);
   }
   token[i] = '/0';
   fseek(infile, -1, 1);
   c = lookup(token);
   if (c == 0) {
    out(outfile, ID, token);
   }
   else {
    out(outfile, c, " ");
   }
  }
  else {
   if (isdigit(ch)) {
    token[0] = ch;
    ch = getletter(infile);
    i = 1;
    while (isdigit(ch)) {
     token[i] = ch;
     i++;
     ch = getletter(infile);
    }
    token[i] = '/0';
    fseek(infile, -1, 1);
    out(outfile, INT, token);
   }
   else {
    switch(ch) {
    case '<':
     {
      ch = getletter(infile);
      if (ch == '=') {
       out(outfile, LE, " ");
      }
      else if (ch == '>') {
       out(outfile, NE, " ");
      }
      else {
       fseek(infile, -1, 1);
       out(outfile, LT, " ");
      }
      break;
     }
    case '=':
     {
      out(outfile, EQ, " ");
      break;
     }
    case '>':
     {
      ch = getletter(infile);
      if (ch == '=') {
       out(outfile, GE, " ");
      }
      else {
       fseek(infile, -1, 1);
       out(outfile, GT, " ");
      }
      break;
     }
    case ':':
     {
      ch = getletter(infile);
      if (ch == '=') {
       out(outfile, FU, " ");
      }
      else {
       fseek(infile, -1, 1);
       out(outfile, MAO, " ");
      }
      break;
     }
    case '/':
     {
      ch = getletter(infile);
      if (ch == '*') {
       out(outfile, ZHU, " ");
      }
      else {
       fseek(infile, -1, 1);
       out(outfile, XIE, " ");
      }
      break;
     }
    case '+':
     {
      out(outfile, JIA, " ");
      break;
     }
    case '-':
     {
      out(outfile, JIAN, " ");
      break;
     }
    case '*':
     {
      out(outfile, CHEN, " ");
      break;
     }
    case ';':
     {
      out(outfile, FEN, " ");
      break;
     }
    case '(':
     {
      out(outfile, ZUO, " ");
      break;
     }
    case ')':
     {
      out(outfile, YOU, " ");
      break;
     }
    default:
     {
      if (ch != EOF) {
       report_error(outfile, ch);
      }
      break;
     }
    }
   }
  }
 } while(ch != EOF);

 return;
}

void main() {
 FILE *in, *out;

 in = fopen("pascal.txt", "r");
 out = fopen("result.txt", "w");

 scanner(in, out);
 fprintf(out, "0,#");

 fclose(in);
 fclose(out);

 printf("Finished!/n");
}

版权声明:本文为博主原创文章,未经博主允许不得转载。

相关文章推荐

哈工大编译原理实验1——词法分析

设计实现类高级语言的词法分析器,基本功能如下: (1)    能识别以下几类单词: 标识符(由大小写字母、数字以及下划线组成,但必须以字母或者下划线开头) 关键字(①类型关键字:整型、浮点型、布...

编译原理实验一 词法分析程序

#include #include #include #include #include #include #include using namespace std; #define ...

编译原理实验 之 词法分析

词法分析步骤是编译器处理的第一步,目的是将用户输入的符号流转化为 后面语法分析所需的 词法单元的形式.          一般来说,经过了词法分析之后, 所有的输入内容都将变成"编译器可识别"的形...

编译原理——词法分析(1)

词法分析对词法分析器的要求词法分析器的功能和输出形式功能: 输入源程序,输出单词符号 单词符号:关键字:保留字,基本字(全体视为一种或一字一种) 标识符:变量名,数组名(统归为一种) 常数: ...

跟vczh看实例学编译原理——二:实现Tinymoe的词法分析

文章中引用的代码均来自https://github.com/vczh/tinymoe。   实现Tinymoe的第一步自然是一个词法分析器。词法分析其所作的事情很简单,就是把一份代码分割成若干个t...

编译原理-1-词法分析

在上一篇文章中,大致介绍了下编译过程。从这篇文章开始,我们就开始逐步慢慢深入的学习编译过程中的步骤。今天我们就来具体看看词法分析到底是怎么回事。 ========================华丽...
内容举报
返回顶部
收藏助手
不良信息举报
您举报文章:深度学习:神经网络中的前向传播和反向传播算法推导
举报原因:
原因补充:

(最多只允许输入30个字)