记一次aws上跑wordcount异常

在aws上选用了centos6 安装了jdk1.8 hadoop2.6.5
配置了单机版的伪分布式环境
可以通过弹性IP在50070端口查看web信息
但运行wordcount就会出现连接不上的异常,发现是进程死掉了
有时是namenode,nodemanager,有时甚至是resourcemanager


思路:
看相关服务的log信息,找到挂掉的原因  (没找到答案)


最终解决方案:

df -h  查看挂载磁盘使用情况,发现已用99%

find / -xdev -size +200M -ls 

吃惊的发现大部分的磁盘占用都来自于目录/usr/hadoop-2.6.5/logs/


删除后再次df -h 已用变为了30%


评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值