- 博客(1)
- 资源 (1)
- 收藏
- 关注
原创 Spark读取Hbase数据转换为Dataset
Spark读取Hbase数据转换为Dataset前言方案的选择方案一方案二方案三总结前言 在公司遇到一个业务场景需要spark同时读取hive和hbase的数据进行关联数据分析。起初开发完在测试系统测试的时候,能够稳定运行,但是用到真实数据的时候很快就暴露了问题,报NullException空指针异常。根本原因是需求要关系型数据和非关系型数据进行关联,而hbase本身是列式存储,列信息是可动...
2019-06-05 16:27:46 1076 3
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人