大数据之Hadoop
Liu_Ning_Bin
这个作者很懒,什么都没留下…
展开
-
HADOOP集群的搭建
准备工作:节点之间时间同步安装jdk上传Hadoop安装包解压并配置环境变量,这里使用的是Hadoop2.7.1(从Hadoop2.7x版本放弃了对JDK6运行时的支持,并且仅与JDK 7+一起使用。)说明:Apache Hadoop 2.7.1是2.xy发行版中的次要发行版,它是在先前版本2.7.0的基础上构建的。这是继Apache Hadoop 2.6.x之后的下一个稳定版本。免密钥登陆集群(相关操作可看集群节点之间的免密钥登陆),并且将两个NameNode都设置免密钥登陆集群,以防原创 2020-08-09 12:25:18 · 127 阅读 · 0 评论 -
Hadoop集群执行hdfs namenode -bootstrapStandby报错
错误:可以看到 报错不能将active namenode的 {dfs.namenode.name.dir} 目录的内容复制到 standby namenode预测active namenode防火墙没有关闭,查看防火墙状态发现防火墙果然没关,关闭防火墙重新执行 hdfs namenode -bootstrapStandbyok,hdfs namenode -bootstrapStandby执行成功...原创 2020-07-03 19:26:18 · 1139 阅读 · 0 评论 -
搭建hadoop集群无法格式化namenode
报错显示无法连接到node3:8485检查IP配置,hosts配置都没有问题,检查防火墙是否关闭,关闭防火墙防火墙关闭命令:再次格式化namenodehdfs namenode -format发现格式成功原创 2020-07-02 20:40:52 · 1286 阅读 · 0 评论 -
格式化zookeeper报错
错误:可以看到显示客户端连接失败查看服务启动的情况:发现zk没有启动,是因为上次虚拟机重启导致的启动zkzkServer.sh start格式化完成原创 2020-07-03 19:44:47 · 806 阅读 · 0 评论 -
hadoop启动集群start-all.sh报错
错误:可以看到所有的JAVA_HOME都无法找到应该是hadoop-env.sh下的JAVA_HOME没有设置把这里的${JAVA_HOME}设置成自己jdk的路径集群启动成功原创 2020-07-03 19:34:20 · 810 阅读 · 0 评论