CDH
文章平均质量分 67
duochiyikou
要更加优秀!
展开
-
变更CDH集群元数据库地址
CDH集群中会遇到元数据库的迁移,迁移后数据库的IP地址发生变化或是元数据库做主备,在主节点挂掉后,需要将数据库CDH集群中的元数据库地址指向新的IP或备用元数据库。1、停止cm页面cdh和cms服务2、在cm节点主机上停止cloudera-scm-server服务systemctl stop cloudera-scm-server3、停止CM和CDH集群后,如果是迁移数据库则可以对数据库进行迁移操作(如果只是主备切换则跳过此步)将原MariaDB数据库数据导出mysql原创 2021-09-09 16:55:24 · 759 阅读 · 0 评论 -
cm元数据库mysql升级
在mysql所在主机上升级mysql现版本5.5.44-MariaDB 升级到 5.5.511、下载mariadb 5.5.51版本包https://downloads.mariadb.org/interstitial/mariadb-5.5.51/bintar-linux-x86_64/mariadb-5.5.51-linux-x86_64.tar.gz/from/http%3A//ftp.hosteurope.de/mirror/archive.mariadb.org/?serve2原创 2021-09-09 16:37:54 · 203 阅读 · 0 评论 -
CDH6集群外配置Gateway节点
①hosts加入所有集群节点中,同步到Gateway节点②集群节点/usr/java/的java目录拷贝到Gateway节点,放相同目录下③集群节点将/opt/cloudera/parcels目录压缩 并拷贝至Gateway节点tar -czvf cdh.tar.gz CDH-6.2.0-1.cdh5.14.2.p0.3/ CDH/④Gateway节点上,创建/opt/cloudera/parcels目录,并将cdh.tar.gz解压至该目录mkdir -p /opt/clouder..原创 2021-09-09 15:20:09 · 829 阅读 · 0 评论 -
cdh6.2的存储和计算分离
cdh6.2中提供了一种新类型的集群,称计算集群。计算集群运行Impala,Spark,Yarn等计算服务,但可以配置这些服务以访问托管在另一个CDH集群中的数据。使用此架构,可以通过各种方式分离计算和存储资源。以下是两种存储分离方式两套cdh测试环境cm和cdh版本6.2.0redhat7.4第一种方式集群A的存储更换到集群B上1、hdfs配置core-site.xml的集群范围高级配置代码段(安全阀)中新增fs.defaultFS,参数为hdfs://B集群ip:8020/原创 2021-09-09 10:46:41 · 635 阅读 · 0 评论 -
cdh系统及硬件方面要求
CDH所有的软件以及硬件要求都在下面的链接中, 我没有找到对凝思操作系统支持的相关说法。https://www.cloudera.com/documentation/enterprise/release-notes/topics/rn_consolidated_pcm.html硬件方面的需求主要是内存, 存储方面的。 您可以从下面链接找到相关的数据。 https://www.clouder...原创 2018-11-14 10:40:47 · 268 阅读 · 0 评论 -
bash引起的cm报错问题
感谢您加入Webex.以下是简单的总结:在诊断过程中, 我们发现主机上运行的 bash 版本不是RHEL7.2操作系统自带的. 默认的 bash 版本应该是version 4.2.46(1)-release (x86_64-redhat-linux-gnu)而主机上的 bash版本为 4.4.0(1)-rc1 (x86_64-unknown-linux-gnu), 我们已确认此问题是因...原创 2018-12-04 14:52:09 · 58 阅读 · 0 评论 -
组件安装文档
下面是您需要的安装文档:pig安装文档:https://www.cloudera.com/documentation/enterprise/5-13-x/topics/cdh_ig_pig_installation.html#topic_16ooize安装文档:https://www.cloudera.com/documentation/enterprise/5-13-x/topi...原创 2018-11-14 15:21:27 · 59 阅读 · 0 评论