实操
魏忠贵
这个作者很懒,什么都没留下…
展开
-
九:Operation category READ/WRITE is not supported in state standby解决案例
1:问题现象:在IDEA写好程序并打包传到hadoop001上去执行的时候,统计不成功,报如下异常:各文件目录如下:log.sh :/home/hadoop/shellG5-Spark-1.0.jar :/home/hadoop/lib2:处理过程2.1依据提示找到相应问题解答:在启用ha的集群中,DFS客户端无法预先知道在操作的时刻哪个NameNode处于活动状态。因此...原创 2018-12-18 17:44:26 · 16592 阅读 · 0 评论 -
十:WARN yarn.Client: Neither spark.yarn.jars nor spark.yarn.archive is set,解决案例
在spark on yarn 上提交任务是,报错如下:这是Spark的一个优化点:WARN yarn.Client: Neither spark.yarn.jars nor spark.yarn.archive is set, falling back to uploading libraries under SPARK_HOME.INFO yarn.Client: Uploading re...原创 2018-12-25 21:35:52 · 7087 阅读 · 1 评论