大数据
Shaw_Best
这个作者很懒,什么都没留下…
展开
-
MapReduce实现二次排序
一、项目整体架构 二、项目的pom.xml设置 <?xml version="1.0" encoding="UTF-8"?> <project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xsi:schemaLocation=...原创 2020-04-06 01:31:27 · 403 阅读 · 0 评论 -
阿里云不同账号实现内网ping通
(适用于同一区域,本例是均位于北京F区) 操作简述: 账户A创建云企业网,账户B、C、D加入 详细步骤 账户A下的操作 1、登录云企业网控制台 https://cen.console.aliyun.com/cen/list?spm=a2c4g.11186623.2.8.42b37435JwRA4m 2、创建云企业网实例 输入实例名称。 名称长度为2~128个字符,以英文字母或中文开头,可包含数字、...原创 2020-04-05 17:57:50 · 1042 阅读 · 0 评论 -
单词计数
一、项目总体架构 二、项目的pom.xml配置 <?xml version="1.0" encoding="UTF-8"?> <project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xsi:schemaLocation=...原创 2020-04-01 17:08:55 · 351 阅读 · 0 评论 -
YARN基本架构及其组件功能
一、YARN基本集群架构 二、各个组件的功能 ResourceManager: 全局的资源管理器,整个集群只有一个,负责集群资源的统一管理和调度分配。 功能: 处理客户端请求 启动/监控Application Master 监控NodeManager 资源分配与调度 NodeManager: 整个集群有多个,负责单节点资源管理和使用。 功能: 单个节点上的资源管理和任务管理(监视Containe...原创 2020-03-24 12:17:46 · 3912 阅读 · 0 评论