博客专栏  >  云计算/大数据   >  HBase学习笔记

HBase学习笔记

一个HBase学习者的学习之路,从基本的概念介绍,到集群部署,再到性能测试,集群备份及故障恢复、与Flume、Phoenix的集成等内容。

关注
9 已关注
22篇博文
  • HBase文件格式演变之路

    Apache HBase是Hadoop的分布式开源的存储管理工具,非常适合随机实时的io操作。 我们知道,Hadoop的Sequence File是一个顺序读写,批量处理的系统。但是为什么HBase能...

    2014-10-24 18:53
    2698
  • HBase创建快照(snapshot)出现异常的处理方法

    今天在hbase中创建快照的时候遇到了如下错误: hbase(main):004:0> snapshot 'booking', 'booking-snapshot-20140912' ERROR:...

    2014-09-12 15:14
    2062
  • Phoenix使用JAVA编程连接HBase-0.96.0

    首先,需要将《使用Phoenix连接HBase-0.96.0》

    2014-05-06 17:11
    3499
  • 使用Phoenix连接HBase-0.96.0

    Phoenix是一个中间件,使用它可以让你在hbase这种nosql数据库上使用sql语句进行数据库操作。

    2014-05-06 14:42
    2768
  • Flume-0.9.4数据插入HBase-0.96

    最近由于业务需要,需要将flume的数据插入HBase-0.96,利用flume的实时日志收集,实现数据的实时存储。正如前文所述,flume-ng即flume-1.4.0版本和hbase-0.96结合...

    2014-01-25 18:29
    1640
  • Flume-ng将数据插入hbase-0.96.0

    上文介绍过flume数据插入hdfs和普通目录,本文继续介绍flume-ng将数据插入hbase-0.96.0. 首先,修改node中flume文件夹下conf目录中的flume-node.conf文...

    2014-01-24 19:55
    1338
  • Flume-ng配置

    1)简介 Flume是一个分布式、可靠、和高可用的海量日志聚合的系统,支持在系统中定制各类数据发送方,用于收集数据;同时,Flume提供对数据进行简单处理,并写到各种数据接受方(可定制)的能力。 设计...

    2014-01-24 18:35
    1139
  • HBase错误总结

    1、出现版本不一致错误 如果启动时出现版本不一致的错误,如下所示: Server IPC version 10 cannot communicate with client version.........

    2013-11-16 17:55
    2629
  • HBase备份之ExportSnapshot或CopyTable

    文章《HBase备份之导入导出》介绍了使用HBase的自带工具Export和Import来实现在主集群和从集群之间拷贝表的目的。本篇介绍一种相比导入导出而言,更快速的一种备份办法。即ExportSna...

    2014-08-13 16:41
    2351
  • HBase备份之导入导出

    我们在上一篇文章《HBase复制》中讲述了如何建立主/从集群,实现数据的实时备份。但是,HBase复制只对设置好复制以后的数据生效,也即,配置好复制之后插入HBase主集群的数据才能同步复制到HBas...

    2014-08-11 17:43
    2555
  • HBase复制

    HBase复制是一种在不同HBase部署中复制数据的方法。它可以作为一种故障恢复的方法,并提供HBase层次的高可用性。在实际应用中,例如,可以将数据从一个面向页面的集群复制到一个MapReduce集...

    2014-07-31 10:43
    2018
  • HBase中的备份和故障恢复方法

    本文将对Apache HBase可用的数据备份机制和大量数据的故障恢复/容灾机制做简要介绍。 随着HBase在重要的商业系统中应用的大量增加,许多企业需要通过对它们的HBase集群建立健壮的备份和故障...

    2014-07-28 18:30
    4446
  • hbase 0.96的一些问题

    public void createTable(String tableName, String[] families) {         HBaseAdmin admin = null;   ...

    2014-05-15 14:57
    845
  • hbase-0.98学习笔记

    hbase-0.98版已经出了,主要的改变有以下几点: 1、修复了一些bug,添加了cell可视化标签、cell ACLs和透明的服务器端加密。 2、一些性能改进包括:预写式日志线程模型,在高负载...

    2014-05-13 18:22
    2102
  • HBase学习笔记(三)

    配置多功能高可用性master hadoop和hbase被设计的可以自动在slave节点间进行故障转移。由于在大型集群中有很多节点,一个slave节点的服务器的硬件故障被认为是正常的。 对于主节点,h...

    2013-12-27 18:17
    2011
  • HBase学习笔记(二)

    在我们安装好hbase之后,需要对linux内核进行一些设置。像其他数据库一样,hbase也会在同一时间打开大量文件,而linux限制了每个进程打开的文件描述符的数目(默认是1024)。为了让hbas...

    2013-12-20 15:38
    2394
  • HBase学习笔记(一)

    配置单机环境: 1、编辑$HBASE_HOME/conf/hbase-env.sh,添加JAVA_HOME(将$HBASE_HOME替换为HBase所在目录路径)。 2、编辑$HBASE_HOME/c...

    2013-12-19 18:16
    2195
  • 初学HBase的几个问题

    本文主要针对对HBase不了解的人。主要想基于个人的理解回答以下几个问题: 什么是HBase?何时用HBase?与Hive、Pig的区别?HBase的结构为何HBase速度很快?HBase常用的操...

    2014-07-31 16:29
    3812
  • Hadoop 2.2.0和HBase-0.98 安装snappy

    hadoop 2.2.0 和hbase 0.98 安装snappy压缩教程

    2014-08-07 15:18
    4079
  • centos集群上安装ganglia-3.6.0监控hadoop-2.2.0和hbase-0.96.0

    Ganglia 是 UC Berkeley 发起的一个开源监视项目,设计用于测量数以千计的节点。每台计算机都运行一个收集和发送度量数据(如处理器速度、内存使用量等)的名为 gmond 的守护进程。它将...

    2013-11-16 17:34
    5778
img博客搬家
img撰写博客
img发布 Chat
img专家申请
img意见反馈
img返回顶部