centos7hadoop集群启动不成功，无法启动

最新推荐文章于 2024-03-26 11:41:16 发布
最新推荐文章于 2024-03-26 11:41:16 发布
阅读量1.8k 收藏 5
点赞数
分类专栏： LINUX centos7 hadoop 文章标签： hadoop centos
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_35888719/article/details/86530753
版权
LINUX 同时被 3 个专栏收录
6 篇文章 0 订阅
订阅专栏
centos7
5 篇文章 0 订阅
订阅专栏
hadoop
5 篇文章 0 订阅
订阅专栏

start-all.sh
jps
jps
重新启动集群之后jps 发现只有jps,没有启动任何节点
查找安装目录日志
cd /soft/hadoop/logs
cat hadoop-centosXXXX
cat yarnXXXX
发现错误是由于端口冲突造成的
在这里插入图片描述
记录下所有日志中的端口冲突号
netstat -anp | grep portname
netstat -anp |grep 50070
在这里插入图片描述
得到进程号
kill 进程号
其他节点也参照此操作进行，先查找日志，找出冲突端口，再查找对应端口冲突的进程号，kill掉进程号即可
重新启动
start-all.sh
jps
在这里插入图片描述
并查看其他节点也正常了
在这里插入图片描述

小蘑菇爱吃草
关注
专栏目录
CentOS7 从零开始搭建 Hadoop2.7集群
hangzhi的博客
09-17 9315
序言 文件准备 权限修改 配置系统环境 配置Hadoop集群 配置无密码登录 启动Hadoop 默认举例 序言 下载软件与工具包 pscp.exe : 用于从本地到目标机器的文件传输 hadoop-2.7.3.targ.gz: Hadoop 2.7 软件包 JDK 1.8: Java 运行环境 准备四台安装好CentOS Minimal 的机器，且已经配置网络环境。（只需要记住四台机器的I
centos7搭建hadoop集群
ZQ914的博客
07-01 872
先期准备 主机 系统 ip地址 hadoop-master centos7 192.168.196.162 hadoop-slave1 centos7 192.168.196.163 hadoop-slave2 centos7 192.168.196.164 ps:
hadoop集群启动失败
diyinqian的博客
12-14 2105
问题描述：以yarn为资源管理器的hadoop集群中，启动失败。具体表现为：执行过start-all.sh之后，集群启动且无报错信息，但是web界面显示的结果与配置文件中的不符合。解决思路： 首先查看主节点的resourceManager相关日志文件，查看报错信息。重点看”caused By”之后的信息。发现地址无法绑定。 依次查看所有从节点的logs目录下的nodemanager相关的日志文件，同
集群启动失败
lbfk的专栏
05-31 295
gcluster/gnode 权限设置为全权 777，集群启动失败； 解决办法： gcluster/gnode 权限设置为 644
Hadoop集群启动报错（已解决！）
Forever_ck的博客
12-27 1035
在Hadoop集群启动时，报错如下： 错误原因： Kafka 中莫名出现大量日志文件，导致磁盘空间不足 解决办法：查找日志过大文件，删除重启即可。 查找大于 200M的日志文件命令 find / -size +200M -exec du -h {} \; ...
centos7 hadoop集群的完整小白安装！！！！
ZhouCWei的博客
09-19 970
hadoop集群的安装 完整 小白
在Centos7上配置Hadoop集群
weixin_45654405的博客
02-22 2123
硬件 创建虚拟机 自定义 先不要安装操作系统,后面再装 选择对应系统,以及硬件配置 虚拟机存放位置 磁盘存放位置 总核心数不要超过电脑的配置(2核n线程 硬盘50G) 软件 打开虚拟化 关闭hyper-V delete进入bios (SVM选项) 配置操作系统(centos) 在官网下载一个镜像 在设备的CD/DVD插入系统 GNOME桌面 或者 最小安装 分配磁盘 /boot 启动 1g 文件系统 ext4 /swap 共享内存 4g / 根目录 剩下的内容 KDUMP 系统崩溃备份一部分数据 网络和主机
基于centos的大数据hadoop集群搭建说明文档
10-30
【标题】：基于CentOS的大数据Hadoop集群搭建详解 【描述】：本教程专为初学者设计，详细阐述了如何手动搭建Hadoop集群，步骤详尽，易于理解。 【标签】：Hadoop集群搭建 【正文】： Hadoop是一个开源的分布式...
Linux（centos7）部署hadoop集群
最新发布
LLMUZI123456789的博客
03-26 754
dfs.datanode.data.dir/data/dn 说明：配置DataNode存储实际数据块的本地目录位置，这里是 /data/dn。dfs.datanode.data.dir.perm700 说明：该配置项设置DataNode存储数据块目录的权限模式。dfs.namenode.name.dir/data/nn 说明：此配置项指定了NameNode存储元数据信息（如文件系统的命名空间，文件到数据块映射等）的本地目录位置，这里是 /data/nn。bin：存放Hadoop的各类程序（命令）
centos6.8搭建hadoop集群
01-07
1.准备一台干净的centos6.8虚拟机 2.关闭防火墙 1.临时关闭防火墙 service iptables stop 2.关闭防火墙自启动 chkconfig iptables off 3.查看防火墙状态 service iptables status 3.设置静态ip vim /etc/...
非常详细的centos7.0下Hadoop2.7.1集群搭建教程
09-26
非常详细的centos7.0下Hadoop2.7.1集群搭建教程，内附自己的解决办法和提示
Hadoop集群启动错误合集
zy541211的博客
09-30 1850
对于新配置的集群，需要将集群格式化，这时会在hadoop的根目录下多了两个文件夹，一个是data另一个是logs。在配置文件的时候改错、多加都会导致集群启动异常，发生出错误后，可查看$HADOOP_HOME/logs/看logs下的该节点的namenode.log文件。
CentOS7 linux 详细 Hadoop完全分布式配置与启动
天天开心
02-23 627
因为我是先配置了伪分布式，在此基础上配置完全分布式，所以有些文件不用修改，就没有截图，但是步骤都有的。 配置的内容均以我自己的环境为基础。 1 环境准备 从已有的hadoop01，克隆2台虚拟机分别为hadoop02，hadoop03。 ...
linux centos7下Hadoop3.1.2配置和启动记录
jquery_learn的博客
09-06 2237
Hadoop发布与启动
Linux(Centos7)下配置Hadoop的环境以及启动其HDFS的详细教程
弗兰-随风小欢的博客
10-12 6903
上一篇博客地址：https://blog.csdn.net/qq_32575047/article/details/102505038 由于篇幅过长，就将安装和配置Hadoop的教程分开来讲，避免博友们的视觉疲劳，上一篇博文我们说到了如何下载Hadoop并解压到Linux的自定义目录中，接下来让我们进入配置环境以及启动Hadoop的正题上吧： 在这里首先我建议大家在配置环境之前，将Hadoop...
启动集群发现有些进程正常无法启动
zaijainruqiu的博客
09-13 1248
对等体连接重复,确信之前的集群可以正常启动运行,且自己没有修改任何配置文件。解决:将多余的文件删除 保证磁盘空间有剩余就可以了 之后再启动集群正常。df命令查看磁盘使用情况 发现磁盘满了 问同事 同事说他做的。查看未启动的进程 kafka和zookeeper。去到kafka中查看配置文件。
Hadoop集群：关于NameNode和ResourceManager群起失败的问题
zuodingquan666的博客
12-11 2866
新手搭建集群的时候，往往因为集群没起来，就慌了手脚。通过jps发现，往往NameNode和ResourceManager以及SecondaryNameNode没有进程。 以上问题的原因主要有以下两点： 集群id不一致 集群端口被占用 集群id不一致解决方法 原因:多次进行namenode格式化造成集群id不一致 解决方法： 方法1：删除hadoop集群每个服务器目录下的data和log文件，然后重新启动集群。 方法2：查看data目录下的name中 data/tmp/dfs/data.
启动zookeeper集群报错
dalong3976的博客
07-19 839
执行关闭命令systemctlstopfirewalld.service，之后正常启动。启动zookeeper集群报错。原因防火墙没有关闭。
linux中hadoop组件启动日志存放问题
weixin_30553777的博客
03-28 116
如果是nohup xxxx &的话会在当前目录下生成一个nohup文件存放当前出现所有的日志,&表示后台启动； 当然你也可以将日志存放在>/dev/null表示当前日志存放的位置，这个目录下的所有日志相当于黑洞都是找不到的 2>&1其中2表示错误日志，1表示正常日志，2>&1意思是错误日志也保存正常日志当中； 转载于:https...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值