![](https://img-blog.csdnimg.cn/20201014180756928.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Hadoop
fang·up·ad
编程、跑步、看书
展开
-
Hadoop 启动namenode节点失败
问题产生 运行下面的命令启动namenode,jps命令查看namenode发现没有启动。查看生成的日志文件发现有如下的警告信息[root@localhost hadoop-2.8.5]# sbin/hadoop-daemon.sh start namenodestarting secondarynamenode, logging to /opt/modules/hado...原创 2018-09-26 11:47:23 · 18259 阅读 · 0 评论 -
Yarn Web页面 8088 端口在Windows浏览器无法访问
问题描述 配置好Hadoop的Namenode节点、secondarynode节点和datanode节点之后,配置hadoop /etc目录下的mapred-site.xml、yarn-site.xml文件,配置完成之后,启动resourcemanager、nodemanager。其中,yarn-site.xml配置如下: <property> ...原创 2018-09-27 13:54:09 · 144765 阅读 · 7 评论 -
寻找Hadoop启动Namenode失败原因
问题产生 hadoop目录下,运行下面语句启动namenode,jps发现namenode启动失败sbin/hadoop.daemon.sh start namenode问题解决 (1)Hadoop namenode、datanode、secondarynamenode节点的日志文件在Hadoop根目录 logs/下。日志命名规则为hadoop-用户名-节点名...原创 2018-09-29 21:49:48 · 4853 阅读 · 0 评论 -
Hadoop 一些错误解决
1. Input path does not exist:file:/路径名 这个问题肯定是core-site.xl 配置文件中fs.defaultFS配置项配置不正确。如果是本机运行hadoop,那么需要修改配置文件中此配置项为hdfs://IP:Port;如果是eclipse提交到服务器运行,需要将自己的配置文件add bulidpath,即配置文件右键---Libraries--...原创 2018-11-20 14:24:20 · 851 阅读 · 0 评论 -
Hadoop中hostname和/etc/hosts配置文件的关系
前言 搭建Hadoop的时候必须配置两个文件:/etc/sysconfig/network和/etc/hosts。 /etc/sysconfig/network的作用是设定机器的主机名:hostname。 /etc/hosts的作用是主机名与ip地址的匹配,如果没有DNS服务器的话,系统上的所有网络程序都通过查询该文件解析主机名对应的ip地址。 一般...转载 2018-12-15 16:21:37 · 8927 阅读 · 1 评论 -
hadoop ha模式下,kill active的namenode节点后,standby的namenode节点没能自动启动
一、背景 在Hadoop HA模式下,如果直接kill掉active namenode,standby namenode没有自动切换到active状态。二、问题解决步骤 1. 查看hadoop安装目录下 etc/hadoop/hadoop-root-zkfc-fang16.hadoop.com.log ,关于zkfc的日志文件。发现如下问题: 由于在ac...原创 2019-01-03 16:31:20 · 4242 阅读 · 1 评论