HQL转换为MR核心流程

在这里插入图片描述

进入客户端

进入服务端

1,解析参数
2,定义标准输入输出流
3,按照 " ; " 切分HQL 语句

进入Driver(驱动器)中

1, 将HQL语句转换成抽象语法树(AST)
2,将语法树转换为逻辑执行单元
3,提交任务执行

PaserDriver

1,将HQL转化成Token(服务端生成的字符串,以作客户端请求的令牌)
2,对Token进行解析,生成AST

SemanticAnalyzer

1,将AST转化为查询块
2,将查询块转化为执行树(逻辑执行计划)
3,对操作树进行逻辑优化
4,生成任务树
5,对任务树物理优化

ExecDriver

1,获取MR临时工作目录
2,定义Partitioner分区
3,定义Mapper和Reducer
4,实例化Job
5,执行Job

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值