HBase
上海菁数信息——实时数字智能
大数据 数据挖掘 机器学习
展开
-
datax hbase writer versionColumn/rowkeyColumn相关配置的解释
官方文档很多地方不说人话 做个简单解释 versionColumn 描述:指定写入hbase的时间戳。 支持:当前时间、指定时间列,指定时间,三者选一。 当前时间 不配置 指定时间列 index:指定对应reader端column的索引,从0开始, value:需保证能转换为long,若是Date类型,会尝试用yyyy-MM-dd HH:mm:ss和yyyy-MM-dd HH:m原创 2017-03-31 17:08:50 · 2851 阅读 · 1 评论 -
HBase使用已有的一套zookeeper
如果多个应用用到了zookeeper服务,可以使HBase使用集群中已有的一套zookeeper,不使用自己独占的zookeeper服务 将conf里hbase-env.sh的export HBASE_MANAGES_ZK=flase 官方原文如下: To point HBase at an existing ZooKeeper cluster, one that is not原创 2017-03-27 08:59:34 · 2241 阅读 · 0 评论 -
hbase数据导出导入,数据备份,数据迁移(仅解决非通信集群)
如题,只说明非通信集群,hbase版本是1.1.10,属于1.1.x系列,跨大版本这个事情另外讨论,参考官网。 面对的环境数据量较大(就是比较小没有几个PB的意思),新老集群无法通信。二步解决,export/import大量坑,在此不表,选用手动方式。 一、导出、导入数据 找到你现在的hbase的数据在hdfs的位置 hadoop fs -copyToLocal /hbase/data/原创 2017-05-11 10:32:42 · 2237 阅读 · 0 评论