- 博客(2)
- 收藏
- 关注
RSS订阅原创 spark在yarn上运行作业报错
spark在yarn上运行作业报错：原因：在Hadoop中配置了支持LZO压缩格式，并且存储在HDFS中的文件也为LZO格式存储，而使用yarn资源调度框架来调度spark引擎进行计算时，spark并不支持读取LZO压缩格式的文件，导致报错解决方法：在spark中配置支持LZO格式找到spark的conf文件夹，编辑spark-defaults.conf，添加下面两行：spark.d...
2020-03-08 18:20:41
451
原创 hiveserver2连接失败
启动beeline连接和hiveserver2服务器时报错：Error: Could not open client transport with JDBC Uri: jdbc:hive2://hadoop102:10000: java.net.ConnectException: 拒绝连接 (Connection refused) (state=08S01,code=0)原因：使用了My...
2020-03-07 11:25:27
3164
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人