![](https://img-blog.csdnimg.cn/20201014180756913.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
大数据
文章平均质量分 77
wayne342175926
他时若凌云志 敢笑黄巢不丈夫
展开
-
cdh大数据集群缩容,hdfs坏块处理,kudu坏表修复
参考官方文档:https://docs.cloudera.com/documentation/manager/5-1-x/Cloudera-Manager-Managing-Clusters/Managing-Clusters-with-Cloudera-Manager.html环境:CM和CDH版本5.13根据官方文档提示:停止的服务器数量不能少于设置的副本数。本次100台机器减少一半不用担心这个问题1、节点下线操作admin用户登陆CM页面1)修改相关配置java堆栈大小调整为4G2)原创 2021-07-23 16:10:06 · 1401 阅读 · 0 评论 -
Hadoop常用组件zookeeper,kafka
Hadoop常用组件zookeeper,kafkaZooKeeper是一个开源的分布式应用程序协调系统。简称ZK,ZK是一个典型的分布式数据一致性解决方案,分布式应用程序可以基于它实现数据的发布/订阅、负载均衡、名称服务、分布式协调/通知、集群管理、Master选举、分布式锁盒分布式队列等等功能。它运行在JAVA环境之中,并具有JAVA和C的绑定。zookeeper集群集群角色•**Leader:**领导者,通过集群选举产生的主节点,负责集群的读与写工作•**Follower:**追随者,有资格参原创 2020-07-14 23:19:31 · 719 阅读 · 0 评论