![](https://img-blog.csdnimg.cn/20190904164804345.png?x-oss-process=image/resize,m_fixed,h_224,w_224)
大数据—Hbase
章锡平
道生一,一生二,二生万物。
展开
-
HBase中的TTL与MinVersion的关系
如果HBase中的表设置了TTL的时候,MinVersion才会起作用。a)MIN_VERSION > 0时:Cell至少有MIN_VERSION个最新版本会保留下来。这样确保在你的查询以及数据早于TTL时有结果返回。b)MIN_VERSION = 0时:Cell中的数据超过TTL时间时,全部清空,不保留最低版本。...原创 2020-03-23 15:59:30 · 487 阅读 · 0 评论 -
问题 HBase RegionServer频繁挂掉
错误日志2019-09-21 20:42:17,264 INFO org.apache.hadoop.hbase.ScheduledChore: Chore: CompactionChecker missed its start time2019-09-21 20:42:17,273 WARN org.apache.hadoop.hbase.util.JvmPauseMonitor: Dete...原创 2019-09-24 10:20:44 · 1717 阅读 · 0 评论 -
问题 spark读取hbase数据写入ES报错
业务流程首先说说我们的业务实现,数据存储在hbase中,通过hive表关联,然后运行spark任务,读取hive表数据,调用es提供的saveToEs方法,将dataframe写入ES错误日志Job aborted due to stage failure: Task 2 in stage 0.0 failed 4 times, most recent failure: Lost task ...原创 2019-09-24 15:54:15 · 551 阅读 · 0 评论