![](https://img-blog.csdnimg.cn/20201014180756757.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
hbase
文章平均质量分 79
你的阿飞哥哥
这个作者很懒,什么都没留下…
展开
-
HRegionServer启动和停止过程分析
HRegionServer的功能1. HRegionServer主要负责响应用户I/O请求,向底层文件系统中读写数据,是HBase中最核心的模块。 HRegionServer内存管理了一系列的HRegion对象,每个HRegion对应了table中的一个Region. HRegion由多个HStore组成,每个HStore对应了table中的一个colum family的存原创 2013-03-01 11:46:46 · 5491 阅读 · 0 评论 -
HBase如何合理设置客户端Write Buffer
http://blog.linezing.com/2012/11/how-to-use-hbase-client-write-bufferHBase客户端API提供了Write Buffer的方式,即批量提交一批Put对象到HBase服务端。本文将结合HBase相关源码,对其进行深入介绍,分析如何在实际项目中合理设置和使用它。什么时候需要Write Buffer?转载 2013-04-12 16:50:26 · 957 阅读 · 0 评论 -
Cloudera Manager和CDH4的安装
Cloudera Manager和CDH4的安装Cloudera Manager安装1. ClouderaManager的安装需要先修改机器的三个配置:l 关闭防火墙:service iptables stop;l 关闭selinux:setenforce 0或修改/etc/selinux/config:SELINUX=disabled;l 配置代理:在/et原创 2013-03-04 16:50:33 · 3157 阅读 · 1 评论 -
Hbase Shell官方详解
HBASE SHELL COMMANDS: alter Alter column family schema; pass table name and a dictionary specifying new column family schema. Dictionaries are described below in the GENERA原创 2013-04-10 14:52:18 · 1397 阅读 · 0 评论 -
hadoop+hbase+zookeeper环境搭建过程总结
安装的环境要求:我用的是x86_64的CentOS6.3 linux操作系统,安装过程很简单,一路默认即可。 搭建开发环境是学习一门新技术的首先要面对的,当然技术的选型也是相当重要,刚开始搭建环境的时候公司让用cloudera manager CDH4自动在cloudera官网下载安装hadoop、hbase、zookeeper等,但是这个过程在网速不好的情况下是相当的缓慢。(在天朝原创 2013-03-27 10:23:05 · 4467 阅读 · 5 评论 -
HBase业务开发测试
业务开发测试HBase之旅一:HTable基本概念http://www.taobaotest.com/blogs/qa?bid=13850业务开发测试HBase之旅二:通过HBase Shell与HBase交互http://www.taobaotest.com/blogs/qa?bid=13871业务开发测试HBase之旅三:通过Java Api与HBase交互http://w原创 2013-04-09 17:59:56 · 869 阅读 · 0 评论 -
HBase性能优化方法总结(一):表的设计
转自http://www.cnblogs.com/panfeng412/archive/2012/03/08/hbase-performance-tuning-section1.html本文主要是从HBase应用程序设计与开发的角度,总结几种常用的性能优化方法。有关HBase系统配置级别的优化,可参考:淘宝Ken Wu同学的博客。下面是本文总结的第一部分内容:表的设计相关的优化方法转载 2013-04-08 17:49:38 · 721 阅读 · 0 评论 -
HBase性能调优
原文链接:http://kenwublog.com/hbase-performance-tuning配置优化zookeeper.session.timeout默认值:3分钟(180000ms)说明:RegionServer与Zookeeper间的连接超时时间。当超时时间到后,ReigonServer会被Zookeeper从RS集群清单中移除,HMaster收到移转载 2013-04-08 17:47:17 · 637 阅读 · 0 评论 -
HBase源码分析_Master启动过程
构造函数:1. 创建RPC服务:i. 创建Listener,主要负责为处理线程创建job,该Listener会创建读取线程(Reader),线程个数为ipc.server.read.threadpool.size,Reader判断Selector中是否有数据,如果有,则把数据读出,然后加入到call队列或者优先队列中。ii.转载 2013-04-02 10:19:58 · 965 阅读 · 0 评论 -
Hbase最好的入门文档
转自阿里集团数据平台一、简介history started by chad walters and jim2006.11 G release paper on BigTable2007.2 inital HBase prototype created as Hadoop contrib2007.10 First useable Hbase20转载 2013-02-28 14:30:35 · 747 阅读 · 0 评论 -
Hbase学习总结一
数据模型:1.用户在表格里存储多行数据行;2.每个数据行都包括一个可排序的关键字,和任意数目的列;3.表格是稀疏的;4.列名是":"形式,其中和可以是任意字符串;5.一个表格的列族集合是固定的,除非使用管理员权限来改变表格的列族;6.可以在任何时候增加新的标签;7.hbase在磁盘上按照列族存储数据,所以一个列族里所有项有相同的读/写方式。8.写操作是行锁定的,对行原创 2013-02-28 13:44:58 · 597 阅读 · 0 评论 -
cdh4.2.0源码搭建hadoop+hbase+zookeeper开发环境
1. 准备工作(1) 首先在cloudera的官网上下载CDH4的hadoop-2.0.0-cdh4.2.0、hbase-0.94.2-cdh4.2.0、zookeeper-3.4.5-cdh4.2.0的tar包(2) 在安装hbase开发环境之前,先安装好java开发环境,配置好环境变量(3) 准备三台主机,在用vi 打开/etc/sysconfig/network原创 2013-03-27 14:19:48 · 2209 阅读 · 0 评论