HBase中RegionServers报异常： No lease on /apps/hbase/data/oldWALs... File is not open for writing

最新推荐文章于 2022-08-03 16:51:38 发布
最新推荐文章于 2022-08-03 16:51:38 发布
阅读量2.2k 收藏 1
点赞数
分类专栏： HBase
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/ZhouyuanLinli/article/details/79473678
版权
这篇博客主要介绍了在HBase运行过程中遇到的RegionServers异常问题：No lease on /apps/hbase/data/oldWALs... File is not open for writing。通过分析日志，发现原因是HDFS配置参数dfs.datanode.max.transfer.threads过小。解决方案包括调整该参数和dfs.datanode.max.xcievers值，并设置系统最大打开文件数。
摘要由CSDN通过智能技术生成

报错日志：

2018-03-07 03:23:02,337 ERROR [regionserver/137.bd/172.17.32.7:16020] regionserver.HRegionServer: Shutdown / close of WAL failed: org.apache.hadoop.hdfs.server.namenode.LeaseExpiredException: No lease on /apps/hbase/data/oldWALs/137.bd%2C16020%2C1520407115048.default.1520410717602 (inode 22636632): File is not open for writing. [Lease.  Holder: DFSClient_NONMAPREDUCE_1513282483_1, pendingcreates: 1]
at org.apache.hadoop.hdfs.server.namenode.FSNamesystem.checkLease(FSNamesystem.java:3536)
at org.apache.hadoop.hdfs.server.namenode.FSNamesystem.getAdditionalDatanode(FSNamesystem.java:3436)
at org.apache.hadoop.hdfs.server.namenode.NameNodeRpcServer.getAdditionalDatanode(NameNodeRpcServer.java:877)
at org.apache.hadoop.hdfs.protocolPB.ClientNamenodeProtocolServerSideTranslatorPB.getAdditionalD

最低0.47元/天 解锁文章
源神
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
How-to: resolve regionserver died with "No lease on /hbase/oldWALs/..."
lulynn的博客
06-16 3479
Error Log from died regionserver:  2015-06-11 16:23:03,072 ERROR [regionserver/slave04/172.31.34.64:60020] regionserver.HRegionServer: Shutdown / close of WAL failed: org.apache.hadoop.hdfs.server.na
tensorflow 分布式结合hdfs 报错：No lease on File does not exist. Holder DFSClient_NONMAPREDUCE
bymain的博客
04-15 5144
tensorflow 分布式脚本启动方式： https://github.com/tensorflow/examples/blob/master/community/en/docs/deploy/hadoop.md 在分布式程序执行代码中使用multiprocessing 分别启动ps， master， worker multiprocessing.Process(target=star...
org.apache.hadoop.hdfs.server.namenode.LeaseExpiredException
weixin_42311498的博客
12-12 980
describe 启动spark程序,有一些打印日志无法正常输出.查找hdfs报错路径/tmp/spark_stream/TrackAddDevInfo/temp,发现路径无法找到.将整个父路径/tmp/删除,重新查看发现目录残留文件,再次删除,还是有残留文件.观察发现文件名不一致,有可能有其他spark任务在执行,关闭所有任务发现文件依然在生成.将checkpoint目录更换为其他名字,执行成功...
org.apache.hadoop.hdfs.server.namenode.LeaseExpiredException: org.apache.hadoop.hdfs.server.namenode
i am me，haha，么么哒。。。
04-13 4340
1.最近hbase的rgion经常挂掉一个，查看该节点日志发现如下错误： 2014-02-22 01:52:02,194 ERROR org.apache.Hadoop.hbase.regionserver.HRegionServer: Close and delete failed org.apache.hadoop.hdfs.server.namenode.LeaseExpired
hbase/hadoop异常：No lease on /hbase/archive/data/... File is not open for writing
刘本龙的专栏
11-21 2264
问题描述 我在进行hbase快照拷贝时报了以下错误： ./hbase org.apache.hadoop.hbase.snapshot.ExportSnapshot -snapshot "MODEL.THIRD_PARTY_KV-11211752-snapshot" -copy-from hdfs://fromIP:9000/hbase -copy-to hdfs://toIP:9000/hbas...
hbase 启动regionserver日志报错： Wrong FS: hdfs:// .regioninfo, expected: file:///
08-14
NULL 博文链接：https://bnmnba.iteye.com/blog/2322332
大数据安全-kerberos技术-hbase安装包，hbase版本：hbase-2.2.6-bin.tar.gz
最新发布
06-07
2. **配置HBase**：修改HBase的配置文件（如`hbase-site.xml`），设置`hbase.security.authentication`为`kerberos`，并提供Kerberos相关属性，如`hbase.kerberos.keytab.file`和`hbase.kerberos.principal`。...
Hbase异常处理
乔克叔叔
03-29 3325
1.No lease on file (inode 5425306): File does not exist. [Lease. Holder: DFSClient_NONMAPREDUCE_-247167534_42, pendingcreates: 1] org.apache.hadoop.ipc.RemoteException: No lease on /user/test/xxx/cc...
hbase 12.1 regionserver 宕机报错记录——1
qq_23280769的专栏
07-10 6808
"Append_min" : 0,     "Append_max" : 0,     "Append_mean" : 0.0,     "Append_median" : 0.0,     "Append_75th_percentile" : 0.0,     "Append_90th_percentile" : 0.0,     "Append_95th_percentile" :
hadoop 报错 org.apache.hadoop.hdfs.server.namenode.LeaseExpiredException
09-26 678
打开文件最大限制 echo "fs.file-max = 65535" >> /etc/sysctl.conf echo "* - nofile 65535" >> /etc/security/limits.conf sysctl -p ulimit -n   修改hadoop配置 vi hdfs-site.xml <property> <name
HDFS超租约异常总结（org.apache.hadoop.hdfs.server.namenode.LeaseExpiredException）
weixin_30731287的博客
09-12 488
异常信息： 13/09/11 12:12:06 INFO hdfs.DFSClient: SMALL_BUFFER_SIZE is 512 org.apache.hadoop.ipc.RemoteException: org.apache.hadoop.hdfs.server.namenode.LeaseExpiredException: No leas e on /tmp/put_dir/...
Hive 问题报错处理——No lease on
Yrz7746321的博客
07-10 2166
Hive job failed with error "org.apache.hadoop.ipc.RemoteException(org.apache.hadoop.hdfs.server.namenode.LeaseExpiredException" 本文介绍了您的配置单元作业失败并出现错误时该怎么办：“org.apache.hadoop.ipc.RemoteException（org.apache.hadoop.hdfs.server.namenode.LeaseExpiredEx.
lease机制导致hdfs创建文件失败
迷默的博客
12-26 4662
最近遇到一个有关hadoop的租赁问题，现在将其记录下来 12716 [main] WARN org.apache.sqoop.tool.EvalSqlTool - SQL exception executing statement: org.postgresql.util.PSQLException: , error: Failed to CREATE_FILE /hawq_data/E...
HBase 在线删除oldWAL释放磁盘空间
数据源的港湾
08-03 2645
HBase的WAL日志会从WAL转移到oldWAL目录，oldWAL可以通过参数来设置保留时效，如以下截图是将oldWAL设置为7天，通过配置hbase.master.logcleaner.ttl指定，这可能会导致磁盘空间占用较大。如果在线上环境碰到磁盘空间占用很大的情况时，可以考虑根据日期条件来删除部分oldWAL日志。（如果是直接删除oldWAL目录下面的所有文件，可能会因为当前正在有WAL移动的动作而导致RegioniServer宕机）......
关闭Kerberos后hbase集群RegionServer经常意外退出
weixin_42240930的博客
10-15 1240
按通常网上的关闭Kerberos集群的方法关闭集群后，hbase集群经常有单节点意外退出，查看日志会发现很长的报错信息，下面从头按顺序开始列举： ABORTING region server cdh136,60020,1539306655523: org.apache.hadoop.hbase.YouAreDeadException: Server REPORT rejected; curre...
hadoop hbase hive 常见问题解决
热门推荐
lhy66的专栏
03-24 12万+
Hadoop常见问题，hbase常见问题，hive常见问题。结合网络资料 和自己遇到的整理。
找不到或无法加载主类 org.apache.hadoop.hdfs.server.namenode.NameNode 问题解决
dzl84394的专栏
05-17 1万+
hadoop的格式化的时候报这个异常"找不到或无法加载主类 org.apache.hadoop.hdfs.server.namenode.NameNode" 网上很多原因，也确实有很多原因导致这个问题 我这里有2个疑似原因， 1，下载包不完整，我也觉得这个理由确实奇葩，但是我真特么遇到了，下小电影都没遇到过这种问题 2，ssh免登陆没起效果，下面是2.7.3的开始文档 h
HBase中Regionserver与Master时间不一致导致RegionServer无法启动ClockOutOfSyncException
厚积而薄发
06-13 2万+
启动HBase的时候，无法启动RegionServer，查看日志，错误如下 2012-06-13 09:33:40,057 FATAL org.apache.hadoop.hbase.regionserver.HRegionServer: Master rejected startup because clock is out of sync org.apache.hadoop.hbase.Cl
No lease on /目录: File does not exist. [Lease. Holder: DFSClient_NONMAPREDUCE_-2059237550_1, pending...
weixin_34037515的博客
04-02 1513
　　感觉程序员的世界真是一个变幻无常且精彩绝伦的世界，每次跑程序都会发现不一样的问题。今天跑MapReduce程序来统计邮箱次数时遇到了一个问题，明明一样的代码，别人能跑，我却跑不了。我相信，基本做这行的都遇到过这种问题。好了，话不多说，来聊聊今天的错误吧。 　　根据日志查看到报的错误为：No lease on /目录: File does not exist. [Lease. Holder:...
" /usr/local /hbase-2.2.3/conf /hbase-site.xml" E212: Can't open file for writing
05-14
这个错误提示意味着你没有权限写入该文件。你可以尝试使用 sudo 命令来以管理员身份运行编辑器，例如： ``` sudo vim /usr/local/hbase-2.2.3/conf/hbase-site.xml ``` 然后输入你的管理员密码并编辑该文件。如果你不想使用命令行编辑器，也可以尝试使用 GUI 编辑器，如 gedit，以管理员身份打开该文件。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值