编制一个读单词过程，源程序为一个文件，读取该文件，识别出各个具有独立意义的单词，即基本保留字、标识符、常数、运算符、界符五大类。并依次输出各个单词的内部编码及单词符号自身值。...

实验1 根据状态转换图手工构造词法扫描器

一、实验目的

1. 理解词法分析器的基本功能

2. 理解词法规则的描述方法

3. 理解状态转换图及其实现

4. 能够编写简单的词法分析器

 

二、实验平台

任选

 

三、实验内容

编制一个读单词过程，源程序为一个文件，读取该文件，识别出各个具有独立意义的单词，即基本保留字、标识符、常数、运算符、界符五大类。并依次输出各个单词的内部编码及单词符号自身值。

单词的内部编码如下：

1、保留字：if、int、for、while、do、return、break、continue；单词种别码为1；

2、标识符：除保留字外的以字母开头，后跟字母、数字的字符序列；单词种别码为2；

3、常数为无符号整形数；单词种别码为3；

4、运算符包括：+、-、*、/、=；单词种别码为4；

5、分隔符包括：,、;、{、}、(、)； 单词种别码为5。

源代码：

 

/***
 * 信 1605-3 20163432 张运涛
 * 编制一个读单词过程，源程序为一个文件，读取该文件，识别出各个具有独立意义的单词，
 * 即基本保留字、标识符、常数、运算符、界符五大类。并依次输出各个单词的内部编码及单词符号自身值。
 */
 
import java.io.File;
import java.io.FileInputStream;
import java.io.IOException;
import java.io.InputStreamReader;
import java.io.Reader;
import java.util.Arrays;
import java.util.List;
import java.util.Scanner;


 
public class Word {
 
    static Scanner sc = new Scanner(System.in);
 
    // 保存关键字
    private static List<String> KeyWords;
    // 保存操作符
    private static List<String> Operators;