CDH5部署三部曲之三：问题总结

A1867350

于 2024-04-23 04:03:38 发布

阅读量558

点赞数 22

分类专栏：程序员文章标签： npm 前端 node.js

本文链接：https://blog.csdn.net/A1867350/article/details/138102579

版权

程序员专栏收录该内容

553 篇文章 0 订阅

订阅专栏

文章讲述了如何修复NFSGateway启动失败的问题，包括检查服务、安装和启动rpcbind，以及调整HDFS和Hive配置。同时分享了Java开发的学习资源，包括面试题集合，涵盖多个技术栈和面试准备内容。

摘要由CSDN通过智能技术生成

点击页面上的重试按钮；

NFS Gateway启动失败

发现NFS Gateway服务有问题，检查日志：

在这里插入图片描述

日志如下，在worker1节点上，portmap和rpcbind这两个服务不存在导致的：

No portmap or rpcbind service is running on this host. Please start portmap or rpcbind service before attempting to start the NFS Gateway role on this host.

于是安装所需服务：

yum install -y nfs-utils rpcbind

启动服务：

systemctl start rpcbind

再次启动：

在这里插入图片描述

等待HDFS服务重启完成后，如下图，可见NFS Gateway问题已经消失：

在这里插入图片描述

HDFS副本不足的块

问题如下图绿框所示：

在这里插入图片描述

目前只有一个datanode，可以增加一个，如下图，进入HDFS的实例页面，点击"添加角色实例"：

在这里插入图片描述

点击下图红框位置，增加一个DataNode：

在这里插入图片描述

如下图，确保worker1和worker2都选上：

在这里插入图片描述

勾选后，点击红框2中的按钮，在下拉菜单中点击“启动”：

在这里插入图片描述

现在有了两个DataNode，所以副本数可以设置为2，如下图红框所示，按照顺序找出参数进行设置，记得点击右下角的"保存更改"按钮：

在这里插入图片描述

上述设置完成后，新写入hdfs的文件副本数为2，如果要将之前已经写入的文件的副本数也调整为2，请SSH登录worker1节点，执行以下命令切换到hdfs账号：

su - hdfs

以hdfs账号的身份执行以下命令，即可完成副本数设置：

hadoop fs -setrep -R 2 /

返回管理页面，可见HDFS的状态变成了健康：

在这里插入图片描述

Hive报错

如下图红框所示，Hive启动失败，日志中提示Version information not found in metastore

在这里插入图片描述

从上图可见Hive服务在worker2上，于是SSH登录worker2，将/usr/share/java目录下的mysql-connector-java.jar文件复制到这个目录下：/opt/cloudera/parcels/CDH-5.7.6-1.cdh5.7.6.p0.6/lib/hive/lib/
在Hive的配置页面，搜索"hive.metastore.schema.verification"，如下图，确保红框3中的复选框取消勾选：

在这里插入图片描述