hbase
上官沐雪
第一步:减少愚蠢的需求。
第二步:努力删减部件或过程
第三步:简化和优化设计。
第四步:加速迭代周期
第五步:自动化
展开
-
hbase在hdfs上目录的介绍
hbase目录的介绍下面是hbase在hdfs上目录的介绍## (1) 进行snapshot或者升级的时候使用到的归档目录。compaction删除hfile的时候,也会把就的hfile归档到这里等。/hbase/archive ## (2)splitlog的corrupt目录,以及corrupt hfile的目录。 /hbase/corrupt ## (3) 表的基本属性信息元文件tableinfo。 /hbase/data/default/mytab/.tabledesc/.tabl原创 2021-06-07 11:25:11 · 334 阅读 · 0 评论 -
使用bulkload方式加载数据到HBase(三种方式)
使用spark把hive数据bulkload到HBase场景:最近有大量数据存在hive里,由于业务需呀,把hive数据放到HBase里于是想到如下三种方案:1.使用hive表映射hbaseCREATE external TABLE `hbase_website`( `key` string, `ocid` string, `companyname` string, `createtime` bigint, `updatetime` bigint, `sitenam原创 2021-06-01 10:31:41 · 1872 阅读 · 0 评论