- 博客(2)
- 收藏
- 关注
原创 大数据知识点整理(xmind)
'''下载链接:https://pan.baidu.com/s/14KQLAv70JQ8Jxz96fYkQag '''提取码:7t95
2020-06-13 17:16:26 459
原创 Spark整合Hive
Spark整合Hive 1.为什么Spark需要整合Hive? 如果Spark不整合Hive,那么就没要办法在集群中对Hive表进行操作,在你上传到集群执行的时候会报错, 找不到表,如图1-1所示的错误: 实时上dal_tour这张表在Hive中是存在的,如图1-2所示: 原因:Hive中元数据信息存放在MySQL中,Spark没有自己的元数据,所以需要要去拿到Hive中的元数据和 数据信息,就可以整合使用HQL,元数据需要Hive的配置信息和MySQL的驱动。 2.整合步骤 2.1 增加配置 在
2020-06-17 13:19:18 231
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人