词法分析器java语言_Java语言词法分析器

一、实验目的

通过设计编制调试一个具体的词法分析程序，加深对词法分析原理的理解。并掌握在对程序设计语言源程序进行扫描过程中将其分解为各类单词的词法分析方法。

编制一个读单词过程，从输入的源程序中，识别出各个具有独立意义的单词，即基本保留字、标识符、常数、运算符、分隔符五大类。并依次输出各个单词的内部编码及单词符号自身值。(遇到错误时可显示“Error”，然后跳过错误部分继续显示).

二、实验准备工作

1、词法分析器的功能和输出格式

词法分析器的功能是输入源程序，输出单词符号。词法分析器的单词符号常常表示成以下的二元式(单词种别码，单词符号的属性值)。本实验中，采用的是一类符号一种别码的方式。

2、Java程序语言的单词符号的种别.

识别java的关键字:

boolean,byte,char,double,false,float,int,long,new,null,short,true,void,instanceof,break,case,catch,continue,default,do,else,for,if,return,switch,try,while,finally,throw,this,super,abstract,final,namtive,private,protected,public ,static,synchronized,transient,volatile,class,extends,implements,interface,package,import,throws;单词识别码为１；

标识符：标识符必须是以字母，下划线，美元符号开始,单词识别码为２；

常量：常数为无符号整形数；单词种别码为3；

运算符：+、-、*、/、=、>、=、<=、＝＝、!= 、++、--、％、＆＆、｜｜、！单词识别码为４；

分隔符：,、;、{、}、(、)； 单词种别码为5

4.单元模块

//业务代码：

import java.io.BufferedReader;

import java.io.File;

import java.io.FileNotFoundException;

import java.io.FileReader;

import java.util.Vector;

public class JavaAnaylsis

{

private static String[] keyword =

{ "boolean", "byte", "char", "double", "false", "float", "int", "long",

"new", "null", "short", "true", "void", "instanceof", "break",

"case", "catch", "continue", "default", "do", "else", "for", "if",

"return", "switch", "try", "while", "finally", "throw", "this",

"super", "abstract", "final", "namtive", "private", "protected",

"public", "static", "synchronized", "transient", "volatile",

"class", "extends", "implements", "interface", "package", "import",

"throws" };

static String string;

static String wordString;

static Vector vc;

public JavaAnaylsis(String str) throws Exception

{

File inFile = new File(str);

if (inFile.exists())

{

System.out.println("文件打开成功！！！");

try

{

FileReader reader = new FileReader(inFile);

BufferedReader br = new BufferedReader(reader);

vc = new Vector();

while ((string = br.readLine()) != null)

{

// 预处理　将一行的字符串连续的空格换成一个空格或将连续的制表符换成一个空格

string = string.trim().replace(" +", " ")

.replaceAll("\\t+", " ");

// System.out.println(string);

judgement();</