- 博客(2)
- 收藏
- 关注
原创 spark在yarn上运行作业报错
spark在yarn上运行作业报错:原因:在Hadoop中配置了支持LZO压缩格式,并且存储在HDFS中的文件也为LZO格式存储,而使用yarn资源调度框架来调度spark引擎进行计算时,spark并不支持读取LZO压缩格式的文件,导致报错解决方法:在spark中配置支持LZO格式找到spark的conf文件夹,编辑spark-defaults.conf,添加下面两行:spark.d...
2020-03-08 18:20:41
451
原创 hiveserver2连接失败
启动beeline连接和hiveserver2服务器时报错:Error: Could not open client transport with JDBC Uri: jdbc:hive2://hadoop102:10000: java.net.ConnectException: 拒绝连接 (Connection refused) (state=08S01,code=0)原因:使用了My...
2020-03-07 11:25:27
3164
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人