![](https://img-blog.csdnimg.cn/20201014180756780.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
hadoop完全分部模式搭建
我仅仅是个小白
这个作者很懒,什么都没留下…
展开
-
hadoop搭建成功的标志
加粗样式针对hadoop搭建成功,小编看网上大多都是主机输入命令jps后,出现五个进程,不包括jps,其实判断的标准并非是这样的。这与你的配置文件有关。如有的人运行jps查看只有4个而没有SecondaryNameNode,’这是你可能把它配置到从机上了。如图:想让自己运行五个也是可以的,简单修改一下这个hadoop配置文件hdfs-site.xml ,默认情况下(就是你不配置),SecondaryNameNode在主机启动,但是看它名字就不想让他在主机启动,毕竟主机开的进程相比从机已经够多了。原创 2020-07-20 20:45:55 · 3608 阅读 · 0 评论 -
完美解决WARNING: YARN_LOG_DIR has been replaced by HADOOP_LOG_DIR. Using value of YARN_LOG_DIR.
如上述清理,启动正常,就是报警告,看着心里痒痒的。解决方案:主要是/etc/profile里文件的错误,用命令:vim /etc/profile,之后把报错的所在一行名字注销了,如我的YARN_LOG_DIR,如图之后source /etc/profile,是文件立即生效,注意从机不要忘记操作,每一个都需要这样做,之后重新启动,命令:start-all.sh 就ok了若是还报错,就没有虚拟操作系统都重启一下,我的就是这样好的。...原创 2020-07-20 20:12:50 · 3823 阅读 · 0 评论 -
完美解决Hadoop3搭建是出现的坑———使用hdfs namenode -format格式化成功,但启动失败
如图情况:前提你的格式化成功解决方法:在/hadoop/sbin路径下:将start-dfs.sh,stop-dfs.sh两个文件顶部添加以下参数HDFS_DATANODE_USER=rootHADOOP_SECURE_DN_USER=hdfsHDFS_NAMENODE_USER=rootHDFS_SECONDARYNAMENODE_USER=rootstart-yarn.sh,stop-yarn.sh顶部也需添加以下YARN_RESOURCEMANAGER_USER=root.原创 2020-07-19 14:33:27 · 2243 阅读 · 3 评论