![](https://img-blog.csdnimg.cn/20201014180756918.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
spark
文章平均质量分 79
ningning1994
没有找到工作去读研的菜鸡
展开
-
Spark on Yarn 搭建过程
Spark On Yarn 搭建教程 最近在作毕设,需要用到Spark on yarn的环境,搭建过程并不复杂,写下来给大家分享。我的平台是搭建在四台机器上,一个节点作为主节点,三个节点作为从节点。主要搭建过程分为以下几个步骤:下载并安装java,scala下载spark和hadoop配置相关配置文件将配置好的文件分发到各个节点搭建Spark on yarn,需要你各个节...原创 2017-03-30 16:25:46 · 865 阅读 · 0 评论 -
因为OOM导致的Lost executor On Yarn
Spark on yarn OOM 问题的一些可以尝试的解决策略原创 2017-03-31 20:10:01 · 1837 阅读 · 0 评论