今天启动hadoop集群的时候发现有两台机器起不起来,用jps命令报如下的错
大致说的是内存不够的意思,然后查了一下,用find / -type f -size +500M命令查看跟目录/下大于500兆的所有文件,结果如下:
看到都是kafka里面的的东西,直接cd /usr/local/kafka_2.11-0.8.2.2/logs
然后使用du -h命令:
可以看到两台机器都用了不少资源,尤其是hadoop03(每台一共20G,logs是kafka放数据的路径,可能之前产生的数据太多了)。。。。
找到原因后,直接删除rm -rf ./logs/*
然后重启hadoop集群,TMD又又又有新的问题!(真是屋漏偏逢连夜雨)
关于Java HotSpot(TM) 64-Bit Server VM warning: Insufficient space for shared memory file: 11043的解决办
最新推荐文章于 2024-07-30 23:10:35 发布
在启动Hadoop集群时遇到'Insufficient space for shared memory file'错误,通过查找大文件发现Kafka日志占用大量空间。删除Kafka日志文件后,重启集群仍遇到进程信息不可用的问题。通过清理/tmp目录下的hsperfdata_*文件解决了此问题,最终成功重启Hadoop集群。
摘要由CSDN通过智能技术生成