冰河的专栏

持之以恒,贵在坚持,每天进步一点点。。。

HBase之——脚本编程

转载请注明出处:https://blog.csdn.net/l1028386804/article/details/88817432 在HBase上进行脚本编程 比如:创建包含两个列族、两个列的表,并插入一些数据,脚本如下: vim hbasescript.script create 't...

2019-03-26 12:52:45

阅读数 83

评论数 0

HBase之——备份与恢复技术

转载请注明出处:https://blog.csdn.net/l1028386804/article/details/88817298 总体来说,HBase的备份分为两类,可以根据不同的需求选择不同的备份方法: 离线备份/full-shutdown备份 使用hadoop distcp命令 在线...

2019-03-26 12:45:42

阅读数 83

评论数 0

Hbase之——命令篇

转载请注明出处:https://blog.csdn.net/l1028386804/article/details/88745274 进入hbase shell console $HBASE_HOME/bin/hbase shell 如果有kerberos认证,需要事先使用相应的keyta...

2019-03-22 17:04:08

阅读数 66

评论数 0

HBase之——部署经验与坑总结

转载请注明出处:https://blog.csdn.net/l1028386804/article/details/88696276 1.本地单机部署hbase,想要使用独立zookeeper,不使用自带的 vim conf/hbase-env.sh export HBASE_MANAGES...

2019-03-20 18:45:20

阅读数 115

评论数 0

HBase之——连接不上Zookeeper的解决方案

转载请注明出处:https://blog.csdn.net/l1028386804/article/details/88695338 当HBase连不上Zookeeper时,会报出如下的错误信息: Could not start ZK at requested port of 2181. ...

2019-03-20 18:00:48

阅读数 312

评论数 0

Hbase之——布隆过滤器BloomFilter

1、主要功能 提高随机读的性能 2、存储开销 bloom filter的数据存在StoreFile的meta中,一旦写入无法更新,因为StoreFile是不可变的。Bloomfilter是一个列族(cf)级别的配置属性,如果你在表中设置了Bloomfilter,那么HBase会在生成StoreFi...

2018-06-24 19:59:52

阅读数 510

评论数 0

HBase之—— Snapshot(快照)

HBase在0.94之后提供了Snapshot功能,一个snapshot其实就是一组metadata信息的集合,它可以将表恢复到以前的一个状态。snapshot并不是一份拷贝,它只是一个文件名的列表,并不拷贝数据。一个全的snapshot可以回滚到原来的表schema和创建snapshot之前的数...

2018-06-24 19:46:30

阅读数 176

评论数 0

Hadoop-2.7.1+Zookeeper-3.4.8+HBase-1.2.1+Hive-2.0.0完全分布式集群

网上有的hadoop,zookeeper,hbase,apache-hive相关文档,具体大家可以百度具体了解,本文不多做介绍,本文从最基本的环境搭建入手,纯环境搭建。搭建次环境唯一要考虑就是软件相互之间的兼容性,及服务器内存(最好大点,虚拟机2G以上),当然也可以...

2018-06-20 21:14:42

阅读数 371

评论数 0

HBase之——MapReduce构建HBase二级索引

import java.io.IOException; import java.util.HashMap; import java.util.Map; import java.util.Set; import org.apache.hadoop.conf.Configuration; impo...

2018-06-20 21:03:56

阅读数 356

评论数 0

HBase之——集群数据手动迁移方案

1、从源HBase集群中复制出HBase数据库到本地目录hadoop fs -get2、目标HBase导入hadoop fs -put3、修复.META.表hbase hbck -fixMeta4、重新分配数据到各RegionServerhbase hbck -fixAssignments...

2018-06-19 21:33:11

阅读数 450

评论数 0

HBase之——协处理编程

为什么引入协处理器?HBase作为列数据库最经常被人诟病的特性包括:无法轻易建立“二级索引”,难以执行求和、计数、排序等操作。比如,在旧版本(<0.92)的Hbase中,统计数据表的总行数,需要使用Counter方法,执行一次MapReduce Job才能得到。虽然HBase...

2018-06-18 23:10:24

阅读数 321

评论数 0

大数据杂谈之——HIVE和HBASE区别

1. 两者分别是什么?    Apache Hive是一个构建在Hadoop基础设施之上的数据仓库。通过Hive可以使用HQL语言查询存放在HDFS上的数据。HQL是一种类SQL语言,这种语言最终被转化为Map/Reduce. 虽然Hive提供了SQL查询功能,但是Hive不能够进行交互查询--...

2018-06-01 21:04:14

阅读数 407

评论数 0

HBase之——通过Java API与HBase交互

不多说,直接上代码,大家自己看代码分析: import java.io.IOException; import org.apache.hadoop.conf.Configuration; import org.apache.hadoop.hbase.HBaseConfiguration; im...

2017-10-23 22:14:20

阅读数 4134

评论数 1

HBase之——Shell基础操作

今天,接着上一篇博文继续,那么,接下来就给大家带来一篇HBase Shell基础操作的总结,不多说,直接列出HBase Shell基础操作的总结如下: 进入hbase命令行 ./hbase shell 显示hbase中的表 list 创建user表,包含info、data两个列族 create...

2017-10-23 21:22:49

阅读数 395

评论数 0

HBase之——单节点安装

这边博文就带着大家一起学习如何安装HBase,首先,我们来学习如何在单节点上安装HBase,后续会带着大家一起学习如何搭建HBase集群。 一、配置服务器主机名和IP映射 1、配置主机名 vim /etc/sysconfig/network NETWORKING=yes HOSTNAME=liuy...

2017-10-22 13:18:39

阅读数 3575

评论数 2

Hbase之——常用Shell命令

进入hbase shell console $HBASE_HOME/bin/hbase shell 如果有kerberos认证,需要事先使用相应的keytab进行一下认证(使用kinit命令),认证成功之后再使用hbase shell进入可以使用whoami命令可查看当前用户 hb...

2016-09-21 12:43:19

阅读数 2037

评论数 0

提示
确定要删除当前文章?
取消 删除
关闭
关闭