hadoop入门 启动 journalnode报错

最新推荐文章于 2024-05-10 10:06:46 发布
最新推荐文章于 2024-05-10 10:06:46 发布
阅读量8.5k 收藏 3
点赞数 2
分类专栏： Hadoop 文章标签： hadoop
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/yanghuadong_1992/article/details/113622249
版权

启动journalnode报错如下

[hadoop@salve001 ~]$ hdfs --daemon start journalnode
ERROR: Cannot set priority of journalnode process 74165
[hadoop@salve001 ~]$ 

查看报错日志提示

2021-02-03 10:42:05,421 ERROR org.apache.hadoop.hdfs.qjournal.server.JournalNode: Failed to start journalnode.
org.apache.hadoop.util.DiskChecker$DiskErrorException: Cannot create directory: /data1/hadoop/dfs/jn

根据提示目录无法创建，手动创建

[root@salve001 ~]# mkdir -p  /data1/hadoop/dfs/jn

切换hadoop用户启动journalnode

modi_2020
关注
  • 2
    点赞
  • 踩
  • 3
    收藏
    觉得还不错? 一键收藏
  • 3
    评论
专栏目录
新手安装hadoop教程和个人遇到的错误及解决办法（错误：./hadoop-daemon.sh start journalnode用不了和WARNING: HADOOP_SECURE_DN_USER）
m0_53802262的博客
09-14 1936
hadoop
JournalNode无法启动问题排查
qq_27710549的博客
05-29 8789
JournalNode无法启动问题排查
启动journal节点时遇到显示错误ERROR: Cannot set priority of journalnode process 3348
sleeping_god_1的博客
07-06 1802
后面尝试启动了几次还是报错，接着就去吃饭了，吃完饭后回来开了电脑，做了个垃圾清理后，再开虚拟机，然后启动journalnode，居然就成功了？于是打开mapred文件，错误出现在第一行第21列。发现不知道为啥中间第一含多了个“？查看错误日志，结果如下。
2024年最新大数据-HDFS原理_journalnode服务(1)，解析底层原理
最新发布
2401_84185145的博客
05-10 691
HDFS（Hadoop Distribution File System）是基于谷歌发布的GFS论文设计的；出了具有其他文件系统具有的特性之后，HDFS还具有：高容错性：认为硬件总是不可靠的；高吞吐量：为大量数据访问的应用提供高吞吐量的支持；大文件存储：支持存储TB或PB级的数据。HDFS作为Hadoop的基础存储设施，实现一个高容错，分布式，可线性扩展的文件系统。
启动Hadoop集群遇到的问题
lalalala233666的博客
06-15 995
问题： datanode没起来 更新data/current/VERSION中的clusterID跟nameNode一致 namenode没起来，格式化，修复一下 hadoop namenode -recover IPC’s epoch 1 is less than the last promised epoch 2 因为hdfs namenode -bootstrapStandby 格式化了Standby导致什么东西不一致了，重新来 ...
hadoop（XShell） 出现错误ERROR: Cannot set priority of namenode process 7927
qq_52596292的博客
08-19 1104
hadoop（XShell） 出现错误ERROR: Cannot set priority of namenode process 7927
hadoop 启动journalnode/namenode Cannot set priority of journalnode process 4760
qq_44874902的博客
01-27 5096
问题：无法设置journalnode/namenode进程4760的优先级 解决方案：1.查看hadoop(logs)日志文件 2.根据异常解决 3.本人日志异常是8480端口被占用 4.netstat -tunlp | grep 8480 查找该端口的进程ID 5.kill -9 进程ID完美解决 ...
错误: 找不到或无法加载主类 org.apache.hadoop.hdfs.qjournal.server.JournalNode
beArrow的博客
04-19 1740
出现这个错误是由于之前在整hadoop HA高可用时，重新创建了一个ha文件夹，将hadoop解压包拷贝进去（问题出现点），然后使用了自定义脚本xsync分发 然后就出现了错误 [hunks@hadoop133 hadoop-2.10.0]# sbin/hadoop-daemon.sh start journalnode starting journalnode, logging to /opt/...
[root@master java]# hadoop namenode -format DEPRECATED: Use of this script to execute hdfs command i
似水流年
09-08 1051
安装Hadoop过程中查看输入的命令行结果经常遇到  not found common  (没有发现命令) 分析解决办法: 1.查看输入的命令是否正确 2.对比命令与所操作的目录是否一致(当前目录是否有此操作命令) 3.查看该命令所操作的目录或文件内容是否有错误特别是针对配置文件  如:hdfs  namenode -format(格式化文件命令)      .bash
启动journalnode没有出现jps进程
m0_69331164的博客
04-14 318
当主节点启动journalnode后，从节点使用jps查询没有出现journalnode进程。如果你是hadoop2.x.x，是在。文件指定datanode的位置而不是slaves。但是如果你是hadoop。文件指定datanode的位置；
关于Journalnode启动失败的问题
lijiang_shen的博客
07-29 4724
今天用普通用户启动journalnode节点时第三个节点报如下错误： root下执行命令： sudo lsof -i:8480 发现： 杀死它： kill -9 3868 然后切换回普通用户： su hadoop 再执行： hadoop-daemon.sh start journalnode 用jps看一下发现可以了。 原因： 在root用户下执行了一次hadoop-daemon.sh start journalnode命令，后来在普通用户下再次执行的时候端口被占用了，杀死就行了。 ...
安装hadoop2.4.1,启动报错,麻烦帮忙看看是.pdf
11-24
在安装Hadoop 2.4.1的过程中遇到启动报错，这通常是由于配置不正确或者依赖库的问题导致的。从给出的部分内容来看，存在多个错误提示，我们将逐一分析。 首先，`WARN util.NativeCodeLoader: Unable to load native...
Hadoop入门
04-10
Hadoop的源起——Lucene ，Doug Cutting开创的开源软件，用java书写代码，实现与Google类似的全文搜索功能，提供了全文检索引擎的架构，包括完整的查询引擎和索引引擎 。
安装hadoop2.4.1,启动报错,麻烦帮忙看看是 (2).pdf
11-24
在安装Hadoop 2.4.1的过程中遇到启动报错，这通常是由于配置不正确或者环境设置不完整导致的。以下是一些可能的原因和解决步骤： 1. **Native库加载失败**： 报错中提到`NativeCodeLoader`无法加载针对你平台的...
Hadoop入门教程
03-02
《Hadoop入门教程》将详细讲解这些过程，以帮助初学者顺利启动Hadoop。 六、Hadoop编程 了解Hadoop的API和编程模型是必不可少的。MapReduce编程模型允许开发者编写Java程序来实现自定义的Map和Reduce函数。此外，...
解决hadoop本地运行报错
10-11
org.apache.hadoop.io.nativeio.NativeIO.java解决办法 将org放入项目的工程目录下 本地运行MR必备的源码包，本地运行MR必备的源码包，本地运行MR必备的源码包，
第一次启动journalnode，没有启动成功
weixin_40981751的博客
04-02 6433
sbin/hadoop-daemon.sh start journalnode 打开节点 然而并没有打开，估计是因为第一次配置文件，哪里配错了。 按照log地址去查看日志： 果然，core_site.xml 29行有错，删除后问题解决。 ...
【解决】HDFS JournalNode启动慢问题排查
hiliang521的博客
11-23 1295
集群启动慢排查
hadoop2: ERROR: Cannot set priority of datanode process 4083
09-19
hadoop2: ERROR: Cannot set priority of datanode process 4083 是由于设置datanode进程优先级失败导致的错误。这个错误可能是由于权限问题或配置错误引起的。可以通过以下步骤来解决这个问题： 1. 检查hadoop用户权限：确保hadoop用户具有足够的权限来设置进程优先级。检查hadoop用户是否有root或sudo权限，或者是否在/etc/security/limits.conf文件中设置了适当的限制。 2. 检查hadoop配置文件：查看hadoop的配置文件，例如hdfs-site.xml和yarn-site.xml，确保没有错误的配置项或参数。特别注意与datanode相关的配置，例如dfs.datanode.max.locked.memory和dfs.datanode.max.proc.threads等。 3. 检查系统内核参数：某些系统内核参数可能会影响进程优先级的设置。例如，检查/proc/sys/kernel/sched_rt_runtime_us参数的值，并确保它足够大以容纳datanode进程的优先级需求。 4. 检查日志文件：查看hadoop的日志文件，特别是datanode进程的日志文件，可以提供更详细的错误信息，以便进一步排查问题。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 3
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值