CDH
CDH是Cloudera的开源平台发行版,包括Apache Hadoop,是专门为满足企业需求而构建的。CDH提供了您需要的企业使用的所有东西。通过将Hadoop与十多个其他重要的开源项目集成,Cloudera创建了一个功能先进的系统,可以帮助您执行端到端的大数据工作流。
日月星辰TEL
如果技术不用于分享,将黯然失色...
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
CDH6.3.2 组件版本和Maven依赖版本
目录remoterepositorycomponent versiondependencytemplateartifact versionremoterepository<project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xsi:schemaLocation="http://maven.apache.org/POM...原创 2020-05-20 12:13:30 · 8516 阅读 · 2 评论 -
cdh6.3.2 环境变量配置
# /etc/profile# System wide environment and startup programs, for login setup# Functions and aliases go in /etc/bashrc# It's NOT a good idea to change this file unless you know what you# are doing. It's much better to create a custom.sh shell script.原创 2020-05-18 10:18:57 · 3044 阅读 · 0 评论 -
CDH spark submit error:Can't create directory Permission denied
问题描述cdh系统重新配置之后,发现spark任务提交失败,报错信息是本地目录创建的权限问题Can't create directory Permission denied问题解决在yarn配置中搜索 cgroup,把“始终使用 Linux Container Executor”选项取消勾选,再重新部署配置...原创 2020-04-27 11:04:40 · 2018 阅读 · 0 评论 -
CDH报错:Resource management is disabled for host cdh03 but at least one of its roles has cgroup parame
问题描述Resource management is disabled for host cdh03 but at least one of its roles has cgroup parame问题解决CDH进入YARN配置页面,搜索 cgroup ,将以下两个选项配置勾选将 CGroups 用于资源管理yarn.nodemanager.linux-cont...原创 2020-04-26 14:07:34 · 1586 阅读 · 1 评论 -
cdh6.3.2 oozie HA 高可用配置
1、配置Oozie Load Balancer(1)进入Oozie配置页面,搜索关键字 port(2)在Oozie Load Balancer栏输入需要开启oozie的host,以逗号隔开cdh01,cdh02,cdh03,cdh04,cdh05,cdh062、配置 Oozie Load Balancer HTTP、HTTPSPort注意:定义的 htt...原创 2020-04-20 19:41:34 · 2869 阅读 · 11 评论 -
CDH6.3.2 Maven Repository: report
CDH 6.3.2The following table lists the project name, groupId, artifactId, and version required to access each CDH artifact.Project groupId artifactId version Apache Avro org.apach...翻译 2020-04-20 10:46:21 · 1773 阅读 · 2 评论 -
CDH hadoop生态的所有组件路径
目录一、CDH自身组件1、cloudera-scm-server2、cloudera-scm-agent二、Hadoop生态组件1、hadoop2、hive3、hbase4、zookeeper5、spark三、CDH加载的环境变量一、CDH自身组件1、cloudera-scm-server/etc/cloudera-scm-server/...原创 2020-04-11 17:57:33 · 4161 阅读 · 0 评论 -
CDH 6.3.2 安装(二)
一、网络配置1、静态网卡配置先查看原本的配置信息cat /etc/sysconfig/network-scripts/ifcfg-ens33防止配置失败,先备份一份cp /etc/sysconfig/network-scripts/ifcfg-ens33 /etc/sysconfig/network-scripts/ifcfg-ens33.tempaltecat /e...原创 2020-03-29 10:36:19 · 11157 阅读 · 17 评论 -
CDH 6.3.2 安装(一)
1、安装vimyum -y install vim2、主机名配置vim /etc/sysconfig/networkNETWORKING=yesHOSTNAME=cdh13、网络配置vim /etc/hosts原创 2020-03-24 10:58:46 · 6065 阅读 · 3 评论
分享