在aws上选用了centos6 安装了jdk1.8 hadoop2.6.5
配置了单机版的伪分布式环境
可以通过弹性IP在50070端口查看web信息
但运行wordcount就会出现连接不上的异常,发现是进程死掉了
有时是namenode,nodemanager,有时甚至是resourcemanager
思路:
看相关服务的log信息,找到挂掉的原因 (没找到答案)
最终解决方案:
配置了单机版的伪分布式环境
可以通过弹性IP在50070端口查看web信息
但运行wordcount就会出现连接不上的异常,发现是进程死掉了
有时是namenode,nodemanager,有时甚至是resourcemanager
思路:
看相关服务的log信息,找到挂掉的原因 (没找到答案)
最终解决方案:
df -h 查看挂载磁盘使用情况,发现已用99%
find / -xdev -size +200M -ls吃惊的发现大部分的磁盘占用都来自于目录/usr/hadoop-2.6.5/logs/
删除后再次df -h 已用变为了30%