hdfs
文章平均质量分 50
非著名程序猿
这个作者很懒,什么都没留下…
展开
-
修改监听namenode8020端口的ip地址
问题描述:一个客户因为他们集群网络环境的变化,要求他们集群把hdfs的namenode监听8020端口的特定IP改为0.0.0.0,在官网上查到了这个方法,具体风险未知,先在我们测试集群上搞了一下,发现hdfs没有受到影响,客户那边实施变更后也一切正常,证明这个方法可用,分享出来!解决办法:1.hdfs组件namenode进入安全模式。执行命令:hdfs dfsadmin -safemode enter2.保存现有namenode日志信息,执行命令:hdfs dfsadmin -save原创 2021-03-29 23:14:09 · 1335 阅读 · 1 评论 -
Namenode在每个整点出现RPC延迟告警故障排查
问题描述:Namenode在每个整点都出现RPC延迟告警,告警期间Hadoop命令无返回结果。beeline连接不上hive,持续时间约5分钟左右问题定位步骤及原因:首先通过监控数据查看集群rpc队列等待时间和处理时间 2.统计audit日志看看rpc请求每秒的qps 3. 在hdfs审计日志目录下,执行这个命令 grep"cmd=contentSummary"hdfs-audit.log*|grep"src=/p...原创 2021-03-29 22:56:49 · 2209 阅读 · 1 评论