大数据
文章平均质量分 95
Idea King
勤练带来力量
展开
-
在windows10下编译Hadoop-2.7.2源码
1. 编译hadoop-2.7.2的目的编译hadoop源代码,意义在于当我们使用eclipse进行hadoop开发时,可以直接在本地运行,而无需打包成jar,然后再提交到hadoop服务器进行运行。当然,这还需要一个可以支持hadoop对应版本的eclipse插件,即hadoop-eclipse-2.x.x.jar。如果在linux系统上,其实很容易,没有那么多磕磕盼盼。在windows系统上编译,需要安装的程序或者工具比较多。但是总结起来,就那么几个,能够通过ant,maven构建java项目,能原创 2021-06-20 17:28:48 · 1174 阅读 · 0 评论 -
YARN简介
文章目录1. 前言2. YARN组件3. YARN工作流程4. 总结参考文献1. 前言2. YARN组件ResourceManagerSchedulerApplicationManagerNodemanagerApplicationMasterContainer3. YARN工作流程4. 总结参考文献[1]原创 2021-04-24 18:30:28 · 2823 阅读 · 0 评论