hadoop start journalnode小坑

最新推荐文章于 2024-05-10 10:06:46 发布
最新推荐文章于 2024-05-10 10:06:46 发布
阅读量6k 收藏 2
点赞数 1
分类专栏： python及shell
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/lifestxx/article/details/78417430
版权

由于配置了journalnode与datanode不在一起，分别是三台服务器与另外三台。

结果每次启动发现启动错了，

最后找到原因，竟然是调错了脚本

hadoop-daemons.sh

hadoop-daemon.sh

两个的区别！

带s的默认是启动所有slaves里配置的服务器的journalnode

不带s的是启动本机的journalnode


自由自在梦在何方
关注
  • 1
    点赞
  • 踩
  • 2
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
专栏目录
JournalNode无法启动问题排查
qq_27710549的博客
05-29 8790
JournalNode无法启动问题排查
新手安装hadoop教程和个人遇到的错误及解决办法（错误：./hadoop-daemon.sh start journalnode用不了和WARNING: HADOOP_SECURE_DN_USER）
m0_53802262的博客
09-14 1936
hadoop
HDFS HA搭建
想到哪写到哪
03-25 148
HDFS HA搭建 官网配置 超详细Hadoop HA高可用集群搭建及常见问题处理 查询报java.net.UnknownHostException 集群规划表 主机名 Java进程 nn1 QuorumPeerMain、journalnode、namenode、DFSZKFailoverController nn2 QuorumPeerMain、journalnode、nam...
2024年最新大数据-HDFS原理_journalnode服务(1)，解析底层原理
最新发布
2401_84185145的博客
05-10 691
HDFS（Hadoop Distribution File System）是基于谷歌发布的GFS论文设计的；出了具有其他文件系统具有的特性之后，HDFS还具有：高容错性：认为硬件总是不可靠的；高吞吐量：为大量数据访问的应用提供高吞吐量的支持；大文件存储：支持存储TB或PB级的数据。HDFS作为Hadoop的基础存储设施，实现一个高容错，分布式，可线性扩展的文件系统。
hadoop 集群重启是出现Journalnode节点目录无法格式化问题
csdn19011的博客
06-02 2646
参考链接：http://blog.csdn.net/knowledgeaaa/article/details/23759099 ...
2021-04-21
dddffggg的博客
04-21 368
HA自动故障转移 主要是学习ha之前,肯定学过普通的hadoop,所以配置可以先在hadoop上复制一份 准备三台机器,hadoop102,hadoop103,hadoop104,首先先配好hadoop102上面的配置 再然后将环境变量中的HADOOP_HOME改成当前的的ha的路径,要不然就一直初始化的是之前的Hadoop 如: 改完之后,要source 一下环境变量的路径,也可以重启一下虚拟机,两者都可以 主要配hdfs-site.xml和core-site.xml,最后所有的配好之后,再配resou
hadoop集群启动步骤(已配置hdfs ha，yarn ha，hive单节点（hadoop01），mysql等)
zx07160501的博客
07-15 4539
1.启动mysql（作为hive的数据库，没有的话可以不用启动）执行service mysql start验证service mysql status2.启动hdfs ha集群（1）启动zookeeper启动 （每个节点都要执行）zkServer.sh start验证 是否启动成功（每个节点都要执行）zkServer.sh status（2）启动journalnode服务（单个启动、多个进程启动）...
Apache Hadoop 3 Quick Start Guide
12-29
Apache Hadoop is a widely used distributed data platform. It enables large datasets to be efficiently processed instead of using one large computer to store and process the data. This book will get ...
hadoop3.3.4 winutils
12-18
7. **启动Hadoop服务**：使用`start-dfs.sh`和`start-yarn.sh`脚本启动HDFS和YARN服务。在Windows环境下，可能需要以管理员权限运行这些脚本。 8. **测试Hadoop集群**：通过运行简单的`hadoop fs -ls`命令检查HDFS...
Hadoop搭建小结
09-29
Hadoop环境搭建小结 █tar解压 █免密登录 █配置文件 █格式化文件系统....
win环境 hadoop 3.1.0安装包
06-25
运行`start-dfs.cmd`启动HDFS，然后运行`start-yarn.cmd`启动YARN。通过`jps`命令检查Hadoop进程是否正常运行。 10. **测试Hadoop**： 使用`hadoop fs -ls /`命令检查HDFS是否工作正常。如果一切顺利，你应该能...
hadoop优化.md
08-15
Hadoop优化以及MR跑的慢的原因和MR优化的一些方法,Hadoop对于小文件的优化方法,以及一些解决方案
master在hadoop用户下启动HA的journalnode失败，显示master: Host key verification failed 主机密钥验证失败
weixin_53891248的博客
11-07 1491
master在hadoop用户下启动HA的journalnode失败，显示master: Host key verification failed
关于hadoop集群启动失败的解决办法
Khimur的博客
10-04 285
在sbin目录下，使用【./hadoop-daemon.sh start journalnode】命令启动各个namenode上的 JournalNode进程。再进行格式化即可解决。我自己启动格式化失败，查阅很久找到解决办法。
hadoop集群错误
error_404_11的博客
03-24 1410
hadoop集群出现错误
Hadoop 增加Journal Node 或者 维护Journal Node问题
houzhizhen的专栏
05-27 8022
以hadoop用户执行以下操作: 1.修改etc/hadoop/hdfs-site.xml,在dfs.namenode.shared.edits.dir 配置项中增加相应的新的journal的地址和端口. 2.把etc/hadoop/hdfs-site.xml分发到集群中各服务器. 3.把现有journal中的数据目录拷贝到新journal服务器. 4.在新journal服务器中执行had
关于Journalnode启动失败的问题
lijiang_shen的博客
07-29 4727
今天用普通用户启动journalnode节点时第三个节点报如下错误： root下执行命令： sudo lsof -i:8480 发现： 杀死它： kill -9 3868 然后切换回普通用户： su hadoop 再执行： hadoop-daemon.sh start journalnode 用jps看一下发现可以了。 原因： 在root用户下执行了一次hadoop-daemon.sh start journalnode命令，后来在普通用户下再次执行的时候端口被占用了，杀死就行了。 ...
第一次启动journalnode，没有启动成功
weixin_40981751的博客
04-02 6442
sbin/hadoop-daemon.sh start journalnode 打开节点 然而并没有打开，估计是因为第一次配置文件，哪里配错了。 按照log地址去查看日志： 果然，core_site.xml 29行有错，删除后问题解决。 ...
hadoop入门 启动 journalnode报错
yanghuadong的博客
02-03 8575
启动journalnode报错如下 [hadoop@salve001 ~]$ hdfs --daemon start journalnode ERROR: Cannot set priority of journalnode process 74165 [hadoop@salve001 ~]$ 查看报错日志提示 2021-02-03 10:42:05,421 ERROR org.apache.hadoop.hdfs.qjournal.server.JournalNode: Failed to s.
hadoop journalnode
04-11
Hadoop JournalNode是Hadoop集群中的一种组件，它用于记录HDFS中所有的操作，包括新增、修改、删除操作等。JournalNode可以保证在Hadoop系统出现故障时，数据不会丢失，从而保证系统的可靠性和高可用性。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值