hbase
爱飞的毛毛虫
一个什么都会点的大厂程序猿
展开
-
0539-5.15.0-HBase-Spark无法在Spark2编译通过(Could not access type Logging in package org.apache.spark)
问题描述: hbase 1.5在spark2.x中使用hbase-spark 依赖访问Hbase的时候,编写的程序无法完成编译,在编译过程中报入下错误Error:scalac: missing or invalid dependency detected while loading class file 'HBaseContext.class'.Could not access type ...原创 2019-10-23 20:49:38 · 389 阅读 · 0 评论 -
Hbase入库(CallTimeoutException)
问题: 如题 :在入库hbase的时候 RPC超时报错入下cal exception: org.apache.hadoop.hbase.ipc.CallTimeoutException: Call id=87, waitTime=60002, operationTimeout=60000 expired. at org.apache.hadoop.hbase.client...原创 2019-10-23 20:29:21 · 2083 阅读 · 0 评论 -
Hbase bulkload数据报 more than 32 hfiles to one family of one region
问题描述如图:在采用hbase 的bulkload方式load数据的时候,报如上错误分析: hbase的默认一个region下默认只能最大有32个hfile文件,默认的hfile的文件大小最大为1G,也就是说一个region里面最多只能放32G,一个批次最大的量就是32G,这样远远不能解决问题, 所以需要调大相应的参数来解决问题解决方案在hbase-site.xml更改这两个参数来调...原创 2019-10-23 20:18:41 · 464 阅读 · 0 评论