- 博客(2)
- 收藏
- 关注
原创 提交spark应用程序spark-submit
做好笔记,是对自己的工作的负责。 我一般就是把提交命令写到shell脚本里面去,类似如下: 这几个参数用过的人都看得懂,还是有几点要注意的: 关于executor-memory和cores,不要超出集群和每个单机的极限,8080(默认)界面能看到能使用的memory,cores等。 然后就是一个大小关系:SPARK_EXECUTOR_MEMORY 不然运行的时候可能出现这两
2015-05-31 19:08:51 842
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人