【Hbase】报错org.apache.hadoop.hbase.RegionTooBusyException

最新推荐文章于 2024-04-09 09:12:16 发布

九师兄

最新推荐文章于 2024-04-09 09:12:16 发布

阅读量8.5k

点赞数

分类专栏：不体系文章标签： hbase Region TooBusy Exception 热点写入

本文为博主九师兄（QQ:541711153 欢迎来探讨技术）原创文章，未经允许博主不允许转载。

本文链接：https://blog.csdn.net/qq_21383435/article/details/78740245

版权

不体系专栏收录该内容

156 篇文章 452 订阅 ¥39.90 ¥99.00

订阅专栏

在执行Spark提交程序时遇到Hbase的RegionTooBusyException，该错误源于热点写入导致Region处理请求超负荷。解决方法包括预分区和调整rowkey格式。尽管预分区能暂时缓解问题，但未能从根本上解决问题，需要进一步进行优化调优。

摘要由CSDN通过智能技术生成

在这里插入图片描述

执行了一个spark-submit程序，操作hbase但是报错org.apache.hadoop.hbase.RegionTooBusyException，具体错误如下

17/12/07 11:49:41 INFO client.AsyncProcess: #70, table=www:person_dist, attempt=10/35 failed=826ops, last exception: org.apache.hadoop.hbase.RegionTooBusyException: org.apache.hadoop.hbase.RegionTooBusyException: Above memstore limit, regionName=www:person_dist,,1512617928531.a5bc9f2b05e93ca73beb7b1057d83e29., server=bigdata01.hzjs.co,16020,1510713472687, memstoreSize=216421096, blockingMemStoreSize=209715200
	at org.apache.hadoop.hbase.regionserver.HRegion.checkResources(HRegion.java:3647)
	at org.apache.hadoop.hbase.regionserver.HRe

了解本专栏