- 博客(2)
- 收藏
- 关注
原创 Spark 之 Graphx学习笔记
写此博客时,我也是刚接触Spark GraphX,很多东西都一知半解,不过还好对Spark原理有一定的了解。为了,进一步学习:可能你会有很多的手段,比如官网(这个是最直接了当,也是最可靠的方法,但需要你有一定的英语能力),博客等。最近看到了一片博客,写的非常不错,在此以做学习笔记的方式写了这篇博客。以下很多内容来源于CSDN博客:千寻千梦:https://blog.csdn.net/qq_3453...
2018-11-19 14:49:50 2533 1
原创 spark-submit提交任务参数解析
导读:spark和yarn整合后,可以将Application提交到Yarn上运行,和StandAlone提交模式一样,Yarn也有两种提交模式。具体:1. yarn-client提交任务 配置:在spark目录下的spark-env.sh添加Hadoop_HOME的配置目录即可提交yarn 任务,具体步骤如下:export HADOOP_CONF_DIR=$HADOOP_...
2018-11-13 18:03:31 2439 1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人