hadoop异常处理之map卡住不动

异常描述:

在执行MR是map卡住不动了,

14/02/27 11:12:55 INFO mapred.JobClient:  map 40% reduce 0%


异常分析:

查看后台日志抛出no space 异常,

查看某台datanode,磁盘打满了


解决方案,迅速清理一些旧的日志释放空间


ps:集群搭建的时候,尽量保持机器资源均衡,否则会出现木桶效应,我们就是因为有一台机器的磁盘小,整体都收到限制,后来加了磁盘才好了一些。

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值