CDH5部署三部曲之三：问题总结

《一线大厂Java面试题解析+核心总结学习笔记+最新讲解视频+实战项目源码》，点击传送门，即可获取！

3. 点击页面上的重试按钮；

NFS Gateway启动失败

1. 发现NFS Gateway服务有问题，检查日志：

2. 日志如下，在worker1节点上，portmap和rpcbind这两个服务不存在导致的：

No portmap or rpcbind service is running on this host. Please start portmap or rpcbind service before attempting to start the NFS Gateway role on this host.

3. 于是安装所需服务：

yum install -y nfs-utils rpcbind

4. 启动服务：

systemctl start rpcbind

5. 再次启动：

6. 等待HDFS服务重启完成后，如下图，可见NFS Gateway问题已经消失：

HDFS副本不足的块

1. 问题如下图绿框所示：

2. 目前只有一个datanode，可以增加一个，如下图，进入HDFS的实例页面，点击"添加角色实例"：

3. 点击下图红框位置，增加一个DataNode：

4. 如下图，确保worker1和worker2都选上：

5. 勾选后，点击红框2中的按钮，在下拉菜单中点击“启动”：

6. 现在有了两个DataNode，所以副本数可以设置为2，如下图红框所示，按照顺序找出参数进行设置，记得点击右下角的"保存更改"按钮：

7. 上述设置完成后，新写入hdfs的文件副本数为2，如果要将之前已经写入的文件的副本数也调整为2，请SSH登录worker1节点，执行以下命令切换到hdfs账号：

su - hdfs

8. 以hdfs账号的身份执行以下命令，即可完成副本数设置：

hadoop fs -setrep -R 2 /

9. 返回管理页面，可见HDFS的状态变成了健康：

Hive报错

1. 如下图红框所示，Hive启动失败，日志中提示Version information not found in metastore

2. 从上图可见Hive服务在worker2上，于是SSH登录worker2，将/usr/share/java目录下的mysql-connector-java.jar文件复制到这个目录下：/opt/cloudera/parcels/CDH-5.7.6-1.cdh5.7.6.p0.6/lib/hive/lib/

3. 在Hive的配置页面，搜索"hive.metastore.schema.verification"，如下图，确保红框3中的复选框取消勾选：

4. 修改配置datanucleus.autoCreateSchema，如下图，确保红框3中的复选框被选中：

5. 重启完成后，Hive状态为健康：

spark-shell执行失败

1. 在worker1或者worker2上执行spark-shell命令进入spark控制台时，会产生内存相关的错误，需要调整YARM相关的内存参数：

2. 在YARN的配置页面，调整yarn.scheduler.maximum-allocation-mb和yarn.nodemanager.resource.memory-mb这两个参数的值，原有的值都是1G，现在都改成2G，如下图：

3. 重启YARN；

4. 重启Spark；

5. 执行spark-shell命令之前，先执行命令su - hdfs切换到hdfs账号；

6. 这次终于成功进入spark-shell交互模式：

最后

既已说到spring cloud alibaba，那对于整个微服务架构，如果想要进一步地向上提升自己，到底应该掌握哪些核心技能呢？

就个人而言，对于整个微服务架构，像RPC、Dubbo、Spring Boot、Spring Cloud Alibaba、Docker、kubernetes、Spring Cloud Netflix、Service Mesh等这些都是最最核心的知识，架构师必经之路！下图，是自绘的微服务架构路线体系大纲，如果有还不知道自己该掌握些啥技术的朋友，可根据小编手绘的大纲进行一个参考。

如果觉得图片不够清晰，也可来找小编分享原件的xmind文档！

且除此份微服务体系大纲外，我也有整理与其每个专题核心知识点对应的最强学习笔记：

• 出神入化——SpringCloudAlibaba.pdf

• SpringCloud微服务架构笔记（一）.pdf

• SpringCloud微服务架构笔记（二）.pdf

• SpringCloud微服务架构笔记（三）.pdf

• SpringCloud微服务架构笔记（四）.pdf

• Dubbo框架RPC实现原理.pdf

• Dubbo最新全面深度解读.pdf

• Spring Boot学习教程.pdf

• SpringBoo核心宝典.pdf

• 第一本Docker书-完整版.pdf

• 使用SpringCloud和Docker实战微服务.pdf

• K8S(kubernetes)学习指南.pdf

另外，如果不知道从何下手开始学习呢，小编这边也有对每个微服务的核心知识点手绘了其对应的知识架构体系大纲，不过全是导出的xmind文件，全部的源文件也都在此！

《一线大厂Java面试题解析+核心总结学习笔记+最新讲解视频+实战项目源码》，点击传送门，即可获取！
果不知道从何下手开始学习呢，小编这边也有对每个微服务的核心知识点手绘了其对应的知识架构体系大纲，不过全是导出的xmind文件，全部的源文件也都在此！

[外链图片转存中…(img-dmSJMVAt-1714469705354)]

《一线大厂Java面试题解析+核心总结学习笔记+最新讲解视频+实战项目源码》，点击传送门，即可获取！