问题解决
本栏主要是解决问题
<一蓑烟雨任平生>
没成功之前才华等于狗屎,只有成功了才证明你的一切!
展开
-
解决集群时间不同步问题
今天在hadoop集群执行任务的时候报了一个这个错误,听名字应该是三台机器的时间不同步。于是同步一下时间即可解决:1、安装ntpdate工具:sudo yum -y install ntp ntpdate2、 设置系统时间与网络时间同步:sudo ntpdate cn.pool.ntp.org3、修改为当地时间sudo cp /usr/share/zoneinfo/Asia/Shanghai /etc/localtime参考自:https://blog.csdn.net/ssbb199原创 2020-11-02 09:34:43 · 1556 阅读 · 0 评论 -
解决问题:在格式化Hadoop之后无法使用HBase和Kafka
目录抛出问题:查找问题:解决问题:测试结果:抛出问题:在初学Hadoop的时候,由于自己手残,把Hadoop格式化了,结果导致很多数据丢失,hbase和kafka不能正常使用,如图所示:查找问题:于是我将hbase全部重新安装,结果还是不能解决。后来经过高人指点,找出了出现这种问题的原因:因为zookeeper上存储了hbase和kafka的元数据,hdfs存储了hbase数据本身,所以重新安装和格式化Hadoop没有作用解决问题:解决方案是,通过zookeeper的客户端命令,将hbase原创 2020-09-25 13:32:09 · 367 阅读 · 0 评论 -
Hadoop如何解决namenode和datanode缺失问题
如果是namenode缺失,则重新格式化即可bin/hdfs namenode -format,但是慎重格式化。如果是datanode缺失,进入到/opt/Hadoop/hadoop/tmp,执行命令 rm -rf dfs 删除,然后重新格式化bin/hdfs namenode -format,最后重启start-all.sh,此操作需要在Hadoop关闭的情况下操作,哪台缺失操作哪台。以上内容仅供参考学习,如有侵权请联系我删除!如果这篇文章对您有帮助,左下角的大拇指就是对博主最大的鼓励。您的鼓原创 2020-09-09 18:49:22 · 1643 阅读 · 0 评论 -
Hadoop集群下运行Wordcount程序中途卡顿运行时间过长的解决方案
一、抛出问题在运行jar包时,或者是测试Hadoop的wordcount程序时,不知道你是否会遇到,运行卡顿,总是出不来结果的问题,就是运行出来了,也是等了大半天,这样等下去会不会有点浪费钱,浪费时间的感觉。。。我曾经也遇到这样的问题,卡了我三天的进程,翻过无数大佬们的博客,最终找出了问题的原因:在每个虚拟机分配的内存和CPU资源太少,不能满足Hadoop运行所需的默认资源需求。二、我的问题...原创 2019-12-29 12:24:40 · 2616 阅读 · 5 评论