Hive与Hadoop的调用关系

原创 2016年08月29日 10:06:57

一、调用图





二、步骤解析


1、提交sql  交给驱动


2、驱动编译:解析相关的字段表信息


3、去metastore查询相关的信息 返回字段表信息


4、编译返回信息 发给驱动


5、驱动发送一个执行计划 交给执行引擎


6、执行计划


6.1、DDLs 对数据库表的操作的 直接和metastore交互
 create table t1(name string);


6.1、把job交给job tracker 让task tracker执行 返回执行信息


6.2、完成job返回数据信息、找namenode查数据


6.3、dfs ops 直接和namenode取数据
select * from t1;
select count(1) from t1;

7、返回结果信息集





版权声明:本文为原创文章,转载请注明出处:http://blog.csdn.net/zengmingen。-松门一枝花csdn博客

相关文章推荐

hadoop、hbase、hive、zookeeper版本对应关系

最新版本: hadoop、hbase、hive、zookeeper版本对应关系续 hadoop与HBase版本对应关系: Hbase  Hadoop  0.92.0   1.0.0 ...

如何用形象的比喻描述大数据的技术生态?Hadoop、Hive、Spark 之间是什么关系?

大数据本身是个很宽泛的概念,Hadoop生态圈(或者泛生态圈)基本上都是为了处理超过单机尺度的数据处理而诞生的。你可以把它比作一个厨房所以需要的各种工具。锅碗瓢盆,各有各的用处,互相之间又有重合。你可...

hadoop、hbase、hive、zookeeper版本对应关系

最新版本: hadoop、hbase、hive、zookeeper版本对应关系续 hadoop与HBase版本对应关系: Hbase   Hadoop  0.92.0   1.0.0 ...

hadoop、hbase、hive、zookeeper版本对应关系

原文: http://www.aboutyun.com/blog-61-62.html hadoop、hbase、hive、zookeeper版本对应关系续 hadoop与HBase版...

Hadoop Hive与Hbase关系 整合

Hadoop Hive与Hbase关系 整合 http://blog.csdn.net/liuzhenwen/article/details/28078625 用hbase做数据库,但由于h...

如何用形象的比喻描述大数据的技术生态?Hadoop、Hive、Spark 之间是什么关系?

http://www.hao123.com/

形象的描述大数据的技术生态以及Hadoop、Hive、Spark 之间关系

作者:Xiaoyu Ma 链接:https://www.zhihu.com/question/27974418/answer/38965760 来源:知乎 著作权归作者所有,若感谢请转步知乎感谢...

Hadoop生态上几个技术的关系与区别:hive、pig、hbase 关系与区别

初接触Hadoop技术的朋友肯定会对它体系下寄生的个个开源项目糊涂了,我敢保证Hive,Pig,HBase这些开源技术会把你搞的有些糊涂,不要紧糊涂的不止你一个,如某个菜鸟的帖子的疑问,when to...
内容举报
返回顶部
收藏助手
不良信息举报
您举报文章:深度学习:神经网络中的前向传播和反向传播算法推导
举报原因:
原因补充:

(最多只允许输入30个字)