HBase
冷月宫主
性格:温和
爱好:读书、听音乐、玩游戏、编程、聊天
生活态度:随缘
工作状况:一般
受教育状况:大学
展开
-
Hbase系统架构及数据结构
HBase中的表一般有这样的特点:1 大:一个表可以有上亿行,上百万列2 面向列:面向列(族)的存储和权限控制,列(族)独立检索。3 稀疏:对于为空(null)的列,并不占用存储空间,因此,表可以设计的非常稀疏。下面一幅图是Hbase在Hadoop Ecosystem中的位置。二、逻辑视图HBase以表的形式存储数据。表有行和列组成。列划分为若干个列族(row fami转载 2013-03-07 17:36:06 · 771 阅读 · 0 评论 -
HBase技术介绍
HBase简介HBase – Hadoop Database,是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统,利用HBase技术可在廉价PC Server上搭建起大规模结构化存储集群。HBase是Google Bigtable的开源实现,类似Google Bigtable利用GFS作为其文件存储系统,HBase利用Hadoop HDFS作为其文件存储系统;Google运行M转载 2013-03-23 00:49:52 · 746 阅读 · 0 评论 -
HBase看上去很美 我的项目失败之路
HBase设计:看上去很美HBase是模仿Google bigtable的开源产品,又是hadoop的衍生品,hadoop作为离线计算系统已经得到业界的普遍认可,并经过N多公司大规模使用的验证,自然地认为HBase也将随之获得成功。《HBase: The Definitive Guide》第8章讲述HBase的架构,从架构上看,其架构很完美:LSM - 解决磁盘随机写问题(转载 2013-03-23 02:41:14 · 1094 阅读 · 0 评论 -
hadoop、hbase、zookeeper环境搭建(详细)
一 机器192.168.0.203 hd203: hadoop namenode & hbase HMaster192.168.0.204 hd204: hadoop datanode & hbase HRegionServer & zookeeper192.168.0.205 hd205: hadoop datanode & hbase HRegionServer & zookeep转载 2013-04-29 21:31:37 · 1097 阅读 · 0 评论 -
Hadoop+Hbase+ZooKeeper 安装配置及需要注意的事项
http://blog.csdn.net/franklysun/article/details/6443027本文重点讲解Hbase的安装、配置、问题解决关于hadoop和zookeeper的安装配置及相关问题,可以参考:hadoop:http://blog.csdn.net/FranklySun/archive/2011/05/13/6417984.aspx转载 2013-04-29 21:38:22 · 761 阅读 · 0 评论 -
三种memcached的JAVA客户端比较
Memcached客户端程序Memcached的java客户端已经存在三种了:* 官方提供的基于传统阻塞io由Greg Whalin维护的客户端* DustinSallings实现的基于java nio的Spymemcached* XMemcached1. 三种API比较 1) memcached client forjava较早推转载 2014-04-12 20:13:38 · 699 阅读 · 0 评论 -
Memcached常用命令及使用说明
一、存储命令存储命令的格式:12 参数说明如下:set/add/replace查找关键字客户机使用它存储关于键值对的额外信息该数据的过期时间,0表转载 2014-04-12 20:14:24 · 693 阅读 · 0 评论 -
Memcached与Redis的性能对比
最近有个项目需要用no-sql数据库来保存大量的数据,插入和查询都比较频繁,相对而言查询更加频繁。是选择Memcached、还是Redis呢?对Memcached与Redis做个相关测试,就知道了。Memcached与Redis测试对比:1) 性能方面:相同的写入和读取数据次数,key为uuid, value为模拟的终端信息约600字节 单线程:转载 2014-04-12 20:12:11 · 2679 阅读 · 0 评论 -
ZooKeeper学习之路 (九)利用ZooKeeper搭建Hadoop的HA集群
https://www.cnblogs.com/qingyunzong/p/8634335.html 讨论QQ:1586558083目录Hadoop HA 原理概述 为什么会有 hadoop HA 机制呢? 那如何解决呢? 集群规划 集群服务器准备 集群安装 1、安装 Zookeeper 集群 2、安装 hadoop 集群 Hadoop HA集群的...转载 2018-07-26 09:48:29 · 582 阅读 · 0 评论 -
Google_三大论文中文版(Bigtable、 GFS、 Google MapReduce)
做个中文版下载源: http://dl.iteye.com/topics/download/38db9a29-3e17-3dce-bc93-df9286081126 做个原版地址链接: http://labs.google.com/papers/gfs.html http://labs.google.com/papers/b转载 2013-03-21 13:09:01 · 1836 阅读 · 1 评论 -
HBase简介(很好的梳理资料)
http://jiajun.iteye.com/blog/899632一、 简介historystarted by chad walters and jim2006.11 G release paper on BigTable2007.2 inital HBase prototype created as Hadoop contrib转载 2013-03-21 12:23:10 · 701 阅读 · 0 评论 -
[博文精选] 怎样向妻子解释MapReduce
http://www.csdn.net/article/2011-08-26/303688摘要:印度Java程序员Shekhar Gulati在自己的博客发表了How I explained MapReduce to my Wife?一文,比较通俗地阐述了MapReduce的概念。译文如下,译者是伯乐在线的 黄慧谕 。 昨天,我在Xebia印度办公室发表了一个关于MapReduce的演转载 2013-03-21 13:22:08 · 775 阅读 · 0 评论 -
软件架构师高级实践
http://www.uml.org.cn/course-arch/rjjg.asp转载 2013-03-07 18:00:53 · 811 阅读 · 0 评论 -
单机版搭建HBase环境图文教程详解
http://www.linuxidc.com/Linux/2012-10/72959.htm 单机版搭建HBase环境图文教程详解 1、下载hbase-0.92.1.tar.gz 2、sudo tar –zxvf hbase-0.92.1.tar.gz –C/usr/ 解压压缩包到/usr目录下 3、修改hbase-env.sh文件,添加ja转载 2013-03-07 17:24:58 · 979 阅读 · 0 评论 -
hbase框架介绍
HBase – HadoopDatabase,是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统,利用HBase技术可在廉价PCServer上搭建起大规模结构化存储集群。HBase是GoogleBigtable的开源实现,类似GoogleBigtable利用GFS作为其文件存储系统,HBase利用HadoopHDFS作为其文件存储系统;Google运行MapReduce来处理Bigta转载 2013-03-07 17:31:34 · 801 阅读 · 0 评论 -
关系型数据库到HBase的数据储存方式变迁
我是标题党,其实本文与hbase关系不大,只是把它作为列族数据库的代表来讲。从目前字眼上看,HBase比Bigtable无疑更具吸引力。题目改成:RDBMS到列族的数据储存方式变迁 更恰当。如今Bigtable型(列族)数据库应用越来越广,功能也很强大。但是很多人还是把它当做关系型数据库在使用,用原来关系型数据库的思维建表、存储、查询。本文以hbase举例讲述数据模式的变化。传统关系型数据转载 2013-03-08 16:01:53 · 744 阅读 · 0 评论 -
10个出色的NoSQL数据库
虽然NoSQL流行语火起来才短短一年的时间,但是不可否认,现在已经开始了第二代运动。尽管早期的堆栈代码只能算是一种实验,然而现在的系统已经更加的成熟、稳定。不过现在也面临着一个严酷的事实:技术越来越成熟——以至于原来很好的NoSQL数据存储不得不进行重写,也有少数人认为这就是所谓的2.0版本。这里列出一些比较知名的工具,可以为大数据建立快速、可扩展的存储库。1. Casssandra转载 2013-03-08 16:40:40 · 801 阅读 · 0 评论 -
那些年Google公开的大数据领域论文
Mikio L. Braun柏林工业大学机器学习学博士后,TWIMPACT联合创始人兼首席数据科学家。在其个人博客上总结了Google近几年大数据领域的论文,并发表了自己的见解。以下为译文:主流的大数据基本都是MapReduce的衍生,然而把目光聚焦到实时上就会发现:MapReuce的局限性已经渐渐浮现。下面将讨论一下自大数据开始,Google公布的大数据相关技术,以及这些转载 2013-03-08 16:52:14 · 1115 阅读 · 0 评论 -
专家讲解 Hadoop:HBASE松散数据存储设计
http://developer.51cto.com/art/201006/203833.htm本节和大家一起学习一下Hadoop:HBASE松散数据存储设计方面的内容,希望通过本节介绍大家能够掌握Hadoop:HBASE松散数据存储设计的方法。Hadoop:HBASE松散数据存储设计初识最近关注Hadoop,因此也顺便关注了一下Hadoop相关的项目。HBAS转载 2013-03-08 15:47:30 · 829 阅读 · 0 评论 -
Google MapReduce/GFS/BigTable三大技术的论文中译版
Google的三大核心技术MapReduce、GFS和BigTable的论文都已经被翻译成高质量的中文,为了方便查看,把三篇论文的地址统一列在这里:)MapReduce: http://blog.csdn.net/active1001/archive/2007/07/02/1675920.aspxGFS: http://blog.csdn.net/xuleicsu/archive/转载 2013-03-21 12:59:19 · 1012 阅读 · 0 评论 -
HBase各版本对JDK和Hadoop版本的支持情况(官方发布的)
http://hbase.apache.org/book.html#configuration Java support by release line HBase Version JDK 7 JDK 8 JDK 9 JDK 10 2.0 Not Supported yes Not Su...转载 2018-08-02 17:59:59 · 9369 阅读 · 0 评论