分布式计算基础
我仅仅是个小白
这个作者很懒,什么都没留下…
展开
-
IDEA之log4j:WARN No..could be found for logger (org.apache.hadoop.metrics2.lib.MutableMetricsFactory)
本人已解决,就不附加报错图片了,直接上解决问题方法,以IDEA为例一:最简单的方法就是,使用系统默认的不过要在Main方法中一条语句:BasicConfigurator.configure(); //自动快速地使用缺省Log4j环境不过要是这样,你每次都要在main方法里去写这个语句,而且还要导入相应包。所以第二种方法:我仔细看啦网上的好的文章,说加一个log4j.perperties,就好了,但我相信肯定有按照他说的加入和没有好,很正常,,,,今天我就带给大家讲解为啥加入后有的人还是不行。.原创 2020-07-29 21:51:48 · 1414 阅读 · 0 评论 -
hadoop搭建成功的标志
加粗样式针对hadoop搭建成功,小编看网上大多都是主机输入命令jps后,出现五个进程,不包括jps,其实判断的标准并非是这样的。这与你的配置文件有关。如有的人运行jps查看只有4个而没有SecondaryNameNode,’这是你可能把它配置到从机上了。如图:想让自己运行五个也是可以的,简单修改一下这个hadoop配置文件hdfs-site.xml ,默认情况下(就是你不配置),SecondaryNameNode在主机启动,但是看它名字就不想让他在主机启动,毕竟主机开的进程相比从机已经够多了。原创 2020-07-20 20:45:55 · 3529 阅读 · 0 评论 -
完美解决WARNING: YARN_LOG_DIR has been replaced by HADOOP_LOG_DIR. Using value of YARN_LOG_DIR.
如上述清理,启动正常,就是报警告,看着心里痒痒的。解决方案:主要是/etc/profile里文件的错误,用命令:vim /etc/profile,之后把报错的所在一行名字注销了,如我的YARN_LOG_DIR,如图之后source /etc/profile,是文件立即生效,注意从机不要忘记操作,每一个都需要这样做,之后重新启动,命令:start-all.sh 就ok了若是还报错,就没有虚拟操作系统都重启一下,我的就是这样好的。...原创 2020-07-20 20:12:50 · 3616 阅读 · 0 评论 -
完美解决Hadoop3搭建是出现的坑———使用hdfs namenode -format格式化成功,但启动失败
如图情况:前提你的格式化成功解决方法:在/hadoop/sbin路径下:将start-dfs.sh,stop-dfs.sh两个文件顶部添加以下参数HDFS_DATANODE_USER=rootHADOOP_SECURE_DN_USER=hdfsHDFS_NAMENODE_USER=rootHDFS_SECONDARYNAMENODE_USER=rootstart-yarn.sh,stop-yarn.sh顶部也需添加以下YARN_RESOURCEMANAGER_USER=root.原创 2020-07-19 14:33:27 · 2210 阅读 · 3 评论 -
CentOS7解决可ping通网络,但重启网络报Job for network.service failed because the control process exited with error
加粗样式在经过systemctl stop NetworkManagersystemctl disable NetworkManagersystemctl enable NetworkManager或者修改Mac地址、重启操作仍无法解决情况下解决办法:①先用ip addr 查看自己都有哪些网卡,它们都是叫什么名字比如:我的centos7就两个网卡,一个叫lo,L另一个叫ens32②查看/etc/sysconfig/network-scripts下,将其余无关的网卡位置文件全删掉,避免原创 2020-07-14 20:42:23 · 1667 阅读 · 2 评论