初识hadoop,配置hadoop集群就一番七荤八素,但是再大的坎都过了却往往阴沟翻船。
每次执行hadoop namenode -format对hadoop文件系统进行格式化时总是报错,导致启动后namenode无法成功启动,去网上找了很多帖子去改都没有成功解决。后来发现,每次format之后,无论是否成功,下次format之前把所有hadoop的临时文件统统删掉然后重新format,这样貌似能format成功,至于到底是为什么,我却不晓得。
另外每次重启机器可能会使hadoop的tmp文件全部删除,这样也可能导致hadoop文件系统中的数据丢失,至于是否如此或者这是为什么,也需要进一步考证。