spark
梦里却知是客
你的眼中 明暗交杂 画中的你 低头说话 不胜真假 不做挣扎 无谓笑话
展开
-
在spark,MapReduce 或 Flink 程序里面制定环境变量
以jdk来举例,当我们需要 更高版本的jdk时,而默认的环境引用的是低版本的jdk,会引发如下错误: Exception in thread "main" java.lang.UnsupportedClassVersionError: com/iteblog/mobile/UserMobileInfo : Unsupported major.minor version 52.0 ...原创 2019-12-06 10:24:48 · 445 阅读 · 0 评论 -
spark日常报错问题-持续性更新
1:spark运行过程中出现与driver链接异常,并存在磁盘读写一场:java.io.IOException: Failed to delete: /mnt/sd04/yarn/nm/usercache/hdfs/appcache/application_1570683010624_24827/blockmgr-24356fee-b578-49a1-8e97-9588d2d1180e...原创 2019-11-22 10:49:34 · 4741 阅读 · 1 评论