spark2.3.1 on hive2.2.1集成
spark可以通过读取hive的元数据来兼容hive,读取hive的表数据,然后在spark引擎中进行sql统计分析,从而,通过spark sql与hive结合实现数据分析将成为一种最佳实践。配置步骤如下:
1、启动hive的元数据服务
hive可以通过服务的形式对外提供元数据读写操作,通过简单的配置即可
下面是hive的基础配置
<property>
<name...
原创
2019-04-16 11:51:46 ·
1022 阅读 ·
0 评论