大数据中遇到坑
自己遇到坑 如果爬出总结
yidianyidei
这个作者很懒,什么都没留下…
展开
-
搭建Hadoop HA 高可用bin/hdfs namenode -bootstrapStandby同步nn1 节点报错build = Unknown -r Unknown; compiled by
文章目录nn1 节点格式化后 执行nn2 数据节点同步找关键报错配置文件core.site.xmlhdfs-site.xml背景再次同步nn1 节点nn1 节点格式化后 执行nn2 数据节点同步[root@hadoop103 hadoop-2.7.2]# bin/hdfs namenode -bootstrapStandby20/08/13 23:37:08 INFO namenode.NameNode: STARTUP_MSG: /*********************************原创 2020-08-19 21:26:05 · 1689 阅读 · 0 评论 -
hive 创建表时候报错,Error: Error while processing statement: FAILED: Execution Error, return code 1 from or
文章目录hive 创建表时候报错解决方法然后推出 重启hive 就成功了hive 创建表时候报错Error: Error while processing statement: FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.DDLTask. MetaException(message:For direct MetaStore DB connections, we don’t support retri原创 2020-08-19 19:57:17 · 7485 阅读 · 0 评论 -
启动hive报错java.net.ConnectException: Call From hadoop102/172.21.x.x to hadoop102:9000 failed on connec
文章目录启动 hive 报错报错分析结论解决启动 hive 报错[root@hadoop102 hive]# bin/hive报错Logging initialized using configuration in jar:file:/opt/module/hive/lib/hive-common-1.2.1.jar!/hive-log4j.propertiesException in thread "main" java.lang.RuntimeException: java.net.Conne原创 2020-08-11 00:08:33 · 2214 阅读 · 0 评论 -
安装mysql 包报错~执行mysql报ERROR! The server quit without updating PID file (/var/lib/mysql/hadoop102.pid).
安装mysql 包出现问题root@hadoop102 mysql-libs]# rpm -ivh MySQL-server-5.6.24-1.el6.x86_64.rpmPreparing… ################################# [100%] file /usr/share/mysql/charsets/README from install of MySQL-server-5.6.24-1.el6.x86_64 con原创 2020-08-11 00:05:03 · 2024 阅读 · 2 评论 -
执行hive sql 报错“FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.DDLTask. “
文章目录执行hive 报错找关键解决执行hive 报错…bin/hivehive> create table student(id int, name string);FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.DDLTask. MetaException(message:Got exception: org.apache.hadoop.fs.FileAlreadyExistsExcept原创 2020-08-10 00:46:54 · 5424 阅读 · 0 评论 -
Hadoop_三台服务器搭建集群- 启动HDFS在fs appendToFile 报错(从失败稀里糊涂Ok了)
无法使用appenToFile一 初始终止集群 stop-dfs.sh错误2另起炉灶-不明所以就OK 了一 初始群起hdfs 集群-start-hdfs.shhadoop fs -appendToFile 3 /220/07/15 09:29:18 INFO hdfs.DFSClient: Exception in createBlockOutputStreamjava.io.IOException: Got error, status message , ack with firstBadL原创 2020-07-15 16:49:17 · 1203 阅读 · 0 评论 -
Hadoop Web UI 50070 界面&8088 Cluster 集群页面只显示一个节点
Hadoop Web UI 界面&Cluster 集群页面只显示一个节点1 不配服务器hosts 文件坑三台腾讯云服务器----可以看到节点都正常启动关闭dfs.sh /yarn.sh 全部进程进程修改本地hosts 文件修改成:启动dfs.sh/ 和yarn.sh 进程可以看到hadoop102 有了 其它是服务器原始主机名 ,那就把其它两台也这么改一下如果网卡不知怎么配置 可以看一下这里:https://blog.csdn.net/yidianyidei/arti原创 2020-07-12 21:19:05 · 3612 阅读 · 2 评论 -
使用不同地域云服务器搭建集群,进程启动OK,50070 可以访问~yarn 8088端口显示拒绝访问
文章目录一 关闭防火墙 配置本机hosts 文件1 关闭防火墙2 配置本地host 文件二本地能否ping 通, 端口排查需要配置网卡重启网卡***本地再次测试接口三 ip 8088 端口访问 依然显示被拒绝1 配置服务器hosts 文件(可能是这个原因)**2 在服务器上看一下端口tcp 6 和tcp??127.0.0.1和0.0.0.0??第四 修改yarn-site.xml 文件一 关闭防火墙 配置本机hosts 文件1 关闭防火墙ps:目前云服务器查看防火墙 —默认看到基本都是没有启动,或者n原创 2020-07-11 18:00:33 · 1362 阅读 · 2 评论 -
mac 电脑连接本地虚拟机搭建centos ssh root@ ip 报 ssh: connect to host master port 22: Connection timed out问题的总结
手贱毁一生故事原有:在本地 VMare 搭建2台centos 7 服务器 昨天好好的连着 今天再连接无响应然后报 ssh: connect to host master port 22: Connection timed out本小白 首先检查自己能否ping 通在虚拟机 —服务器上–ping www.baidu.com 是可以的然后ifconfig --又ping 一下对应ip 也是没问题的但是在本地 终端ping 虚拟机服务器ip 就各种超时请求 request timeout …原创 2020-06-27 17:55:09 · 1419 阅读 · 0 评论