【HIT哈工大编译原理实验】词法分析程序java

HIT哈工大编译实验

下载地址
https://download.csdn.net/download/qinglingls/11139962

要求:阐述词法分析系统所要完成的功能
设计实现类高级语言的词法分析器,基本功能为识别以下几类单词:
Ø 标识符(由大小写字母、数字以及下划线组成,但必须以字母或者下划线开头)
Ø 关键字(①类型关键字:整型、浮点型、布尔型、记录型;②分支结构中的if和else;③循环结构中的do和while;④过程声明和调用中的关键字)
Ø 运算符(①算术运算符;②关系运算符;③逻辑运算)
Ø 界符(①用于赋值语句的界符,如“=”;②用于句子结尾的界符,如“;”;③用于数组表示的界符,如“[”和“]”;④用于浮点数表示的界符“.”)
Ø 常数(无符号整数和浮点数,包括科学计数法,字符串常数等)
Ø 注释(/……/形式)

除此之外,可以实现一些额外功能,如
(1)
按照某种格式,对代码进行格式化,便于读者浏览。
(2)
识别字符常数.
通过文件导入FA转换表和测试用例,可以通过用户界面显示并编辑测试用例。测试用例要涵盖“实验内容”中列出的各类单词,并包含各种单词拼写错误。
系统的输出分为两部分:打印输出源程序对应的token序列和符号表。

结果:

在这里插入图片描述

词法分析程序:

KeyWord类:定义了种别码和对应的关键字,可以根据自己的需要在后面加
LexAnalyse类:词法分析类,直接运行,结果输出到OUTPUT.TXT里面。
error类是错误,输出结果用notepad打开效果显著。
LexResult类:一个接口,便于下一步的语法分析,可以输出以$分隔开的结果到字符串。
如果词法分析阶段有错,抛出异常,报错。
Word类:目前(在词法阶段)暂时没什么用。
WordSet:同上.
但是他们在语法分析里会派上用场的。

在这里插入图片描述

  • 1
    点赞
  • 10
    收藏
    觉得还不错? 一键收藏
  • 2
    评论
词法分析和语法分析是计算机科学领域中自然语言处理的重要任务。它们用于将自然语言文本转换成计算机可理解的结构化形式,为后续的语义分析、文本挖掘和机器翻译等任务提供基础。 词法分析是将自然语言文本切割成一个个单独的词(token)的过程。它通过识别和标记文本中的关键词汇、标点符号和语法结构,为之后的语法分析提供输入。词法分析实验通常包括使用词汇表定义所有可能的词汇以及对输入文本进行分词的过程。 语法分析是对词法分析结果进行进一步处理,判断文本中的语法结构是否符合规定的语法规则。它通过构建语法树(syntax tree)来表示文本的语法结构,同时可以检验文本是否符合所定义的语法规则。语法分析的实验常涉及定义语法规则,设计自动化的分析算法,以及验证算法是否能够正确地识别和解析输入文本。 针对词法分析和语法分析的实验,可以使用编程语言(如Python)编写程序,定义词法分析器和语法分析器的具体执行过程。通过在实验中构建合适的词汇表、语法规则和样本文本,可以测试和验证分析器的性能和准确性。 总的来说,词法分析和语法分析是自然语言处理的基础技术,对于理解和处理自然语言文本具有重要意义。相关的实验可以通过编程语言来实现,帮助研究人员和开发者深入理解和应用这些技术。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 2
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值