在虚拟机上搭建hadoop伪分布式环境时遇到了一些问题,再次总结一下,网上已经有很多针对各种hadoop搭建错误的不错的解决方法,这里是我遇到的一些问题。
我的centos跟别人不太一样呢= =
问题一:修改主机名
这个我没有做很多的调查,不过大多数教你如何搭建hadoop的博客中写道去/etc/xxx/network中更改主机名,但是还是要看不同的linux坂本,比如我的(我不记得centos什么版本的了),就直接在 /etc目录下的hostname文件中直接修改即可。
问题二:唯有datanode不启动
一开始datanode和namenode都没有启动的,后来查了一些资料发现是因为我曾经多次格式化namenode造成的。现在只有datanode没有启动,查看一下datanode的日志,发线:
重新进到对应目录,将data的目录删除,然后重新启动hadoop,全部进程都启动了。
我是使用start-all.sh启动hadoop,然后用stop-all.sh终止全部结点运行的。