Cloudera Manager和CDH搭建相关事项

最新推荐文章于 2023-03-06 11:16:47 发布

昨天感冒了

最新推荐文章于 2023-03-06 11:16:47 发布

阅读量433

点赞数 2

本文链接：https://blog.csdn.net/weixin_40083942/article/details/82756831

版权

大数据运维专栏收录该内容

1 篇文章 0 订阅

订阅专栏

Cloudera Manager和CDH搭建可参考“https://blog.csdn.net/gtsina/article/details/78048925”这篇博客，亲测可以搭建成功。搭建过程遇到的一些问题及解决方案记录如下：

1、安装之前一定要配置ntpd服务器，不然会出现警告

解决方案：

如何安装ntpd服务器，请参考“https://blog.csdn.net/freedomboy319/article/details/46710255”。

2、设置root授权访问以上所有的数据库

解决方案：

#授权root用户在主节点拥有所有数据库的访问权限
grant all privileges on *.* to 'root'@'n1' identified by 'xxxx' with grant option;
flush privileges;

其中'xxxx'为mysql的密码

3、Cloudera 建议将 /proc/sys/vm/swappiness 设置为最大值 10。当前设置为 60。使用 sysctl 命令在运行时更改该设置并编辑 /etc/sysctl.conf，以在重启后保存该设置。您可以继续进行安装，但 Cloudera Manager 可能会报告您的主机由于交换而运行状况不良。以下主机将受到影响：

解决方案：

在终端运行命令 “echo 0 > /proc/sys/vm/swappiness”即可解决。

4、已启用透明大页面压缩，可能会导致重大性能问题。请运行“echo never > /sys/kernel/mm/transparent_hugepage/defrag”和“echo never > /sys/kernel/mm/transparent_hugepage/enabled”以禁用此设置，然后将同一命令添加到 /etc/rc.local 等初始化脚本中，以便在系统重启时予以设置。以下主机将受到影响

解决方案：

运行“echo never > /sys/kernel/mm/transparent_hugepage/defrag”和“echo never > /sys/kernel/mm/transparent_hugepage/enabled”以禁用此设置，然后将同一命令添加到 /etc/rc.local 等初始化脚本中，以便在系统重启时予以设置。

5、在如下页面可能需要需要reports 、oozie 、hue数据库，不然不会出现“Successful ”

解决方案：

create database reports DEFAULT CHARSET utf8 COLLATE utf8_general_ci;
create database oozie DEFAULT CHARSET utf8 COLLATE utf8_general_ci;
create database hue DEFAULT CHARSET utf8 COLLATE utf8_general_ci;