- 博客(2)
- 收藏
- 关注
原创 Spark异常报错整理
答主是一名刚接触Hadoop,Spark的小白工程师,该文章整理答主在开发过程中遇到的一些Spark的错误,将会持续更新。1)Exit Code:13Stack trace:ExitCodeException exitCode=13: org.apache.hadoop.util.Shell.runCommand(Shell.java:545)...错误原因:任务在提
2018-01-29 20:46:32 4120
原创 SparkStreaming local模式部署下遇到的requirement failed的问题
最近在local模式下部署了一个数据筛选的sparkstreaming程序,主要是对一些用户的交易数据进行实时处理,环境配置如下: spark :2.1.0,目前是采用单个节点的Standalone部署模式 scala:2.10.4 jdk:1.7.079 该程序在执行时没有出现异常,但是在执行一段时间之后会报 IllegalArgumentException:Requirement fa
2018-01-29 20:33:45 2455 2
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人