HBase中RegionServers报异常： No lease on /apps/hbase/data/oldWALs... File is not open for writing

最新推荐文章于 2022-06-20 23:00:40 发布
最新推荐文章于 2022-06-20 23:00:40 发布
阅读量2.2k 收藏 1
点赞数
分类专栏： HBase
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/ZhouyuanLinli/article/details/79473678
版权
这篇博客主要介绍了在HBase运行过程中遇到的RegionServers异常问题：No lease on /apps/hbase/data/oldWALs... File is not open for writing。通过分析日志，发现原因是HDFS配置参数dfs.datanode.max.transfer.threads过小。解决方案包括调整该参数和dfs.datanode.max.xcievers值，并设置系统最大打开文件数。
摘要由CSDN通过智能技术生成

报错日志：

2018-03-07 03:23:02,337 ERROR [regionserver/137.bd/172.17.32.7:16020] regionserver.HRegionServer: Shutdown / close of WAL failed: org.apache.hadoop.hdfs.server.namenode.LeaseExpiredException: No lease on /apps/hbase/data/oldWALs/137.bd%2C16020%2C1520407115048.default.1520410717602 (inode 22636632): File is not open for writing. [Lease.  Holder: DFSClient_NONMAPREDUCE_1513282483_1, pendingcreates: 1]
at org.apache.hadoop.hdfs.server.namenode.FSNamesystem.checkLease(FSNamesystem.java:3536)
at org.apache.hadoop.hdfs.server.namenode.FSNamesystem.getAdditionalDatanode(FSNamesystem.java:3436)
at org.apache.hadoop.hdfs.server.namenode.NameNodeRpcServer.getAdditionalDatanode(NameNodeRpcServer.java:877)
at org.apache.hadoop.hdfs.protocolPB.ClientNamenodeProtocolServerSideTranslatorPB.getAdditionalD

最低0.47元/天 解锁文章
源神
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
访问Hdfs文件,文件明明存在却报错说文件不存在的问题解决
爱米酱的博客
09-27 4838
今天在访问hdfs文件的时候出现了一个奇怪的问题，我去访问 /user/hive/warehouse/ 下的一个表文件的时候，明明这个文件存在，可是在访问的时候后台就是报错这个文件不存在。 这是因为需要显式指定 Hadoop 配置项 “fs.defaultFS”； conf.set("fs.defaultFS", "hdfs://localhost:9000"); //没有这一项会报错 FileSystem fs = FileSystem.get(conf); ...
hbase 异常 未解决
myrainblues的专栏
01-29 2517
2015-01-29 09:57:39,466 - ERROR [regionserver60020:ProtobufLogWriter@150] - Got IOException while writing trailer org.apache.hadoop.ipc.RemoteException(org.apache.hadoop.hdfs.server.namenode.LeaseExp
hbase0.9x问题总结
02-22 3914
1.最近hbase的rgion经常挂掉一个，查看该节点日志发现如下错误： 2014-02-22 01:52:02,194 ERROR org.apache.hadoop.hbase.regionserver.HRegionServer: Close and delete failed org.apache.hadoop.hdfs.server.namenode.LeaseExpiredExce
hbase regionserver总出现自动down的情况排查
热门推荐
TURING.DT
05-05 1万+
最近在调试hbase，10台节点，服务正常后，写入数据，总是出现regionserver自动down的情况，查看日志如下： 2016-05-04 13:29:09,690 WARN  [regionserver/ma7.cloud/192.168.1.46:16020] wal.ProtobufLogWriter: Failed to write trailer, non-fatal, co
org.apache.hadoop.hdfs.server.namenode.LeaseExpiredException
weixin_42311498的博客
12-12 980
describe 启动spark程序,有一些打印日志无法正常输出.查找hdfs报错路径/tmp/spark_stream/TrackAddDevInfo/temp,发现路径无法找到.将整个父路径/tmp/删除,重新查看发现目录残留文件,再次删除,还是有残留文件.观察发现文件名不一致,有可能有其他spark任务在执行,关闭所有任务发现文件依然在生成.将checkpoint目录更换为其他名字,执行成功...
org.apache.hadoop.hdfs.server.namenode.LeaseExpiredException: org.apache.hadoop.hdfs.server.namenode
i am me，haha，么么哒。。。
04-13 4340
1.最近hbase的rgion经常挂掉一个，查看该节点日志发现如下错误： 2014-02-22 01:52:02,194 ERROR org.apache.Hadoop.hbase.regionserver.HRegionServer: Close and delete failed org.apache.hadoop.hdfs.server.namenode.LeaseExpired
hbase 启动regionserver日志报错： Wrong FS: hdfs:// .regioninfo, expected: file:///
08-14
NULL 博文链接：https://bnmnba.iteye.com/blog/2322332
大数据安全-kerberos技术-hbase安装包，hbase版本：hbase-2.2.6-bin.tar.gz
最新发布
06-07
2. **配置HBase**：修改HBase的配置文件（如`hbase-site.xml`），设置`hbase.security.authentication`为`kerberos`，并提供Kerberos相关属性，如`hbase.kerberos.keytab.file`和`hbase.kerberos.principal`。...
How-to: resolve regionserver died with "No lease on /hbase/oldWALs/..."
lulynn的博客
06-16 3479
Error Log from died regionserver:  2015-06-11 16:23:03,072 ERROR [regionserver/slave04/172.31.34.64:60020] regionserver.HRegionServer: Shutdown / close of WAL failed: org.apache.hadoop.hdfs.server.na
HDFS超租约异常总结（org.apache.hadoop.hdfs.server.namenode.LeaseExpiredException）
就问你吃不吃药
12-01 923
异常信息：13/09/11 12:12:06 INFO hdfs.DFSClient: SMALL_BUFFER_SIZE is 512 org.apache.hadoop.ipc.RemoteException: org.apache.hadoop.hdfs.server.namenode.LeaseExpiredException: No leas e on /tmp/put_dir/20130
hbase/hadoop异常：No lease on /hbase/archive/data/... File is not open for writing
刘本龙的专栏
11-21 2264
问题描述 我在进行hbase快照拷贝时报了以下错误： ./hbase org.apache.hadoop.hbase.snapshot.ExportSnapshot -snapshot "MODEL.THIRD_PARTY_KV-11211752-snapshot" -copy-from hdfs://fromIP:9000/hbase -copy-to hdfs://toIP:9000/hbas...
HDFS 常见的异常处理方式汇总
Shockang的博客
06-20 2190
Hadoop 由众多模块组成，哪一个出错，都会导致 Hadoop 整个系统出现异常。下面介绍下常见的 Hadoop 异常处理（不定期更新）。NameNode 被重新格式化，DataNode 数据版本与 NameNode 不一致。磁盘损坏。更换硬盘。文件确实不存在，或者是权限问题导致数据没有正确地写入Hiv的读取路径。设置 或设置 Hive 读取路径正确的可写权限。之前用错误账户启动 Hadoop,导...
tensorflow 分布式结合hdfs 报错：No lease on File does not exist. Holder DFSClient_NONMAPREDUCE
bymain的博客
04-15 5144
tensorflow 分布式脚本启动方式： https://github.com/tensorflow/examples/blob/master/community/en/docs/deploy/hadoop.md 在分布式程序执行代码中使用multiprocessing 分别启动ps， master， worker multiprocessing.Process(target=star...
No lease on xxxx.txt (inode 43285976): File does not exist. Holder DFSClient_NONMAPR
u010791030的博客
07-13 3228
文件上传到hdfs，同时操作一个文件会报错 org.apache.hadoop.ipc.RemoteException(org.apache.hadoop.hdfs.server.namenode.LeaseExpiredException): No lease on /xx/xx/xx/xx/xx/xxxx.txt (inode 43285976): File does not exist. ...
Hbase异常处理
乔克叔叔
03-29 3325
1.No lease on file (inode 5425306): File does not exist. [Lease. Holder: DFSClient_NONMAPREDUCE_-247167534_42, pendingcreates: 1] org.apache.hadoop.ipc.RemoteException: No lease on /user/test/xxx/cc...
sudo -u hdfs hdfs balancer出现异常 No lease on /system/balancer.id
Littleree的博客
08-23 298
sudo -u hdfs hdfs balancer出现异常 No lease on /system/balancer.id
" /usr/local /hbase-2.2.3/conf /hbase-site.xml" E212: Can't open file for writing
05-14
这个错误提示意味着你没有权限写入该文件。你可以尝试使用 sudo 命令来以管理员身份运行编辑器，例如： ``` sudo vim /usr/local/hbase-2.2.3/conf/hbase-site.xml ``` 然后输入你的管理员密码并编辑该文件。如果你不想使用命令行编辑器，也可以尝试使用 GUI 编辑器，如 gedit，以管理员身份打开该文件。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值