![](https://img-blog.csdnimg.cn/20201014180756927.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Hbase
Hbase学习使用以及优化
软工小透明
找个wlb的工作,做自己感兴趣的事情,人生才有意义
展开
-
HBASE-java.lang.IllegalAccessError: tried to access method com.google.common.base.Stopwatch
异常原因:我是在hbase中用 table.put(list)的时候发生这个报错的(最后发现与此无关),我很纳闷的是程序之前都是正常跑的,怎么今天重新打包部署了一下就报错了,然后跟随百度大佬们模糊的指点,知道了是jar包冲突问题解决过程:首先检查自己maven依赖中有没有这个类的依赖包,发现还真有,配置如下: <dependency> ...原创 2020-02-17 23:08:52 · 2901 阅读 · 1 评论 -
记一次Sparkstreaming应用之Hbase插入数据优化
最近使用SparkStreaming对公司交互产品的日志进行处理最后插入Hbase和Redis,数据经Flume收集后入Kafka,然后途径Sparkstreaming应用,最后插入相应数据库中;然后发现在数据产生的高峰期Sparkstreaming居然发生数据计算积压的情况,也就是任务积压导致的阻塞,由于公司环境是内网,Spark job界面也无法查看,无法排查是哪里的问题;只能用linux...原创 2019-09-19 15:36:32 · 624 阅读 · 1 评论