![](https://img-blog.csdnimg.cn/20201014180756930.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
YARN
文章平均质量分 71
行云流水1234567
这个作者很懒,什么都没留下…
展开
-
YARN(Hadoop)学习笔记(4)
org.apache.hadoop.yarn.server.resourcemanager.scheduler.capacity包下的LeafQueue#CSAssignment阅读笔记public synchronized CSAssignment assignContainers(Resource clusterResource, FiCaSchedulerNode node原创 2014-12-04 17:23:09 · 900 阅读 · 0 评论 -
YARN(Hadoop)学习笔记(1)
一、 JDK环境1. 下载JDK由于Hadoop分布式平台框架是根据Java编写的,所以需要有JDK的支持。从ORACLE官网上下载JDK。这里需要注意的是下载和OS配套的版本。一般分为x86和x64两个版本。可以通过命令uname–r查看版本。下载后解压缩就可以了。在实践中,我发现JDK需要解压到usr目录下,否则不能成功部署。2. 修改环境变量Linux环境变量的原创 2014-10-28 20:33:34 · 687 阅读 · 0 评论 -
YARN(Hadoop)学习笔记(2)
DistributedShell是一个可以分布式原创 2014-07-24 09:32:10 · 664 阅读 · 0 评论 -
YARN(Hadoop)学习笔记(3)
/** * Licensed to the Apache Software Foundation (ASF) under one * or more contributor license agreements. See the NOTICE file * distributed with this work for additional information * regard原创 2014-10-28 22:44:26 · 528 阅读 · 0 评论 -
YARN(Hadoop)学习笔记(6)
YARN应用程序分析我们先回顾一下YARN的三个核心组件,分别是ResourceManager,NodeManager和ApplicationMaster。首先RM是一个中心的服务,它做的事情是调度、启动每一个 Job 所属的 ApplicationMaster、另外监控 ApplicationMaster 的存在情况。RM负责作业与资源的调度。接收 JobSubmitter原创 2015-01-01 17:10:04 · 575 阅读 · 0 评论