CDH
文章平均质量分 79
大数据技术与数仓
欢迎关注我的公众号【大数据技术与数仓】
回复【资料】领取大数据书籍与视频
展开
-
CDH集群之YARN性能调优
本文主要讨论CDH集群的YARN调优配置,关于YARN的调优配置,主要关注CPU和内存的调优,其中CPU是指物理CPU个数乘以CPU核数,即Vcores = CPU数量*CPU核数。YARN是以container容器的形式封装资源的,task在container内部执行。 集群配置 集群的配置主要包括三步,第一是先规划集群的工作主机以及每台主机的配置,第二是规划每台主机的安装的组件及其资源分配,...原创 2019-12-03 17:48:13 · 2361 阅读 · 0 评论 -
CDH5.15.0中的hue集成Hbase
CDH5.15.0中的hue集成Hbase 1.确认hbase-site.xml配置文件中的如下内容 <property> <name>hbase.thrift.support.proxyuser</name> <value>true</value> </property> ...原创 2018-10-18 15:25:22 · 3514 阅读 · 0 评论 -
Oozie调度使用案例--使用命令行方式
Oozie调度使用案例 环境准备 CDH5.15.0,hue3.9.0+cdh5.15.0,oozie4.1.0+cdh5.15.0 2.使用案例 (1)在oozie-4.1.0-cdh5.15.0.tar.gz的解压目录中存在一个oozie-examples.tar.gz的tar包 [root@sdw1 software]# tar -xzvf oozie-4.1....原创 2018-10-19 13:38:33 · 809 阅读 · 0 评论 -
CDH5.15.1安装部署
目录 一、软件环境 二、安装前准备 2.1配置网络名称(hostname) 2.2配置SSH免密登录 2.3集群时间同步 2.4关闭防火墙 2.5关闭SELINUX 2.6安装JDK 2.7安装和配置数据库 2.7.1安装MySQL 2.7.2为Cloudera组件创建数据库 2.8Linux参数配置 2.8.1设置swappiness 2.8.2关闭透明大页面 2....原创 2018-12-30 23:12:42 · 1332 阅读 · 0 评论