Hive on Spark 环境搭建

Hive引擎介绍：

        Hive引擎介绍包括：默认MR、tez、spark。

问题：企业里面用什么呢？

选择取决于，你对性能的要求与数据量本身。

一般都希望运行的快一点，生产环境里面更偏向选择spark，tez是完全基于内存的，数据量之后稳定性不够，日常指标（数据量不是很大），日报表（运行过去一天的数据）考虑用spark，数据量很大，运行很长时间，spark运行时间太长，内存扛不住，稳定性不够，某些指标的执行引擎切换为mr

tez 平时学习，测试的时候使用。我们当前项目用是spark。spark和hive整合。

Hive on Spark：Hive既作为存储元数据又负责SQL的解析优化，语法是HQL语法，执行引擎变成了Spark，Spark负责采用RDD执行。

Spark on Hive : Hive只作为存储元数据，Spark负责SQL解析优化，语法是Spark SQL语法，Spark负责采用RDD执行。

Hive on Spark配置