hbase
文章平均质量分 69
IT路上跑不动的猪
这个作者很懒,什么都没留下…
展开
-
在原有的hbase集群中搭建一个新的hbase集群
集群环境:(以下数字为集群内机器的hostname)Hadoop:Namenode&jobtracker:28Datanode&tasktracker:15,16,17,18,23,24,25,26,27,28Hbase:Master:18Regionserver:15,16,17,18,23,24,25,26,27,28Zookeeper:15,17,18原创 2013-12-10 21:02:18 · 1740 阅读 · 0 评论 -
Hadoop+Hbase安装说明
Hadoop安装说明:首先将hadoop源文件放置在分布式机器桑的统一的一个目录之下,然后修改所有机器上hadoop源文件中的conf目录之下的core-site.xml配置文件,将参数fs.default.name的值设置为namenode所在的机器名,eg: hdfs://hostname:9000(格式:hdfs://ip或者hostname:端口号);最好将hadoop.tmp.dir原创 2013-12-10 21:06:50 · 803 阅读 · 0 评论 -
ycsb与hbase的合作
实验环境:hadoop1.0.1+hbase0.96.0+myeclipse8.5部署ycsb1、在github上https://github.com/brianfrankcooper/YCSB下载ycsb-master2、解压后,将YCSB-master\core\src\main\java下面的com文件夹,YCSB-master\hbase\src\main\java下面的c原创 2014-02-21 17:33:17 · 919 阅读 · 0 评论 -
hbase中region分裂设置
在hbase-0.96.0中,默认状态下,region分裂策略是IncreasingToUpperBoundRegionSplitPolicy,即根据table的region个数的平方乘以memstore flush size的大小,比如memstore size 默认是128M,第一次是flush就分裂,因为region就一个,分成2个region后,下次分裂是region的size为2*2*1原创 2014-02-26 19:08:34 · 3633 阅读 · 0 评论 -
hadoop副本控制
在hadoop+hbase分布式集群中,有参数来控制数据副本,在hadoop的conf目录下,hdfs-site.xml中的属性dfs.replication可以明确指明副本数目。但是在实验中,尽管将每个节点上的dfs.replication属性都设置为1,但是实际数据的副本还是为3。经过多次实验,解决方法是在hbase的的conf下的配置文件hbase-site中加上参数属性dfs.re原创 2014-02-28 16:26:23 · 1212 阅读 · 0 评论