Hbase
wangqiaowqo
我思故我在,欢迎大家来访!
展开
-
HBase 高性能获取数据(多线程批量式解决办法) + MySQL和HBase性能测试比较[转]
HBase 高性能获取数据(多线程批量式解决办法) + MySQL和HBase性能测试比较http://www.cnblogs.com/wgp13x/p/4245182.html在实现过程中,发现当批量Get的数据量达到一定程度时(如10W),向HBase请求数据会从innerGet发生EOFExeption异常。EOFException是当输入过程中意外到达文件或流的末尾...原创 2016-05-06 18:12:09 · 267 阅读 · 0 评论 -
HbaseNewUtils
[code="java"]package com.youku.laifeng;import java.io.IOException;import java.io.InterruptedIOException;import java.util.Calendar;import java.util.Date;import java.util.HashMap;import ...原创 2016-03-17 16:01:01 · 71 阅读 · 0 评论 -
Hbase 机器配置
Hbase 机器配置[code="java"][logging] default = FILE:/var/log/krb5libs.log kdc = FILE:/var/log/krb5kdc.log admin_server = FILE:/var/logdmind.log[libdefaults] default_realm = HBASE.YOUKU1...原创 2016-03-17 15:32:59 · 296 阅读 · 0 评论 -
Hbase查询[转]
shell命令查看所有表list查看某个表结构desc 'lf:lf_t_result_room_online_min_user_stat'添加数据put 'lf:lf_t_result_room_online_min_user_stat' ,'rowkey1111','room','111'扫描全表 scan 'lf:lf_t_result_room_online...原创 2016-03-17 10:56:44 · 137 阅读 · 0 评论 -
Hbase shell
1、list[code="java"]hbase(main):001:0> listTABLE ...原创 2016-03-10 10:43:41 · 108 阅读 · 0 评论 -
基于HBase做Storm 实时计算指标存储
基于HBase做Storm 实时计算指标存储举个例子,假设我们有客户 10w,计算指标假设 100 个,5 个 ISP,30 个地域,这样就有亿级以上的 Key 了,我们还要统计分钟级别,小时级别,天级别,月级别。所以写入量和存储量都不小。如果采用 Redis/Memcached 写入速度是没有问题的,毕竟完全的内存操作。但是 key 集合太大,其实压力也蛮大的,我去的时候因为加了...原创 2016-03-07 10:11:17 · 194 阅读 · 0 评论 -
HBase 常用Shell命令
参考http://www.cnblogs.com/nexiyi/p/hbase_shell.html进入hbase shell console$HBASE_HOME/bin/hbase shell如果有kerberos认证,需要事先使用相应的keytab进行一下认证(使用kinit命令),认证成功之后再使用hbase shell进入可以使用whoami命令可查看当前用户hb...原创 2016-02-26 17:35:11 · 63 阅读 · 0 评论 -
Hbase根据指定条件返回数据
参考大数据性能调优之HBase的RowKey设计http://www.open-open.com/lib/view/open1417612091323.html使用HBASE用到的几个filter SingleColumnValueFilter,RowFilter,ValueFilterhttp://www.tuicool.com/articles/2eiqMfzSingl...原创 2016-02-16 18:18:06 · 1250 阅读 · 0 评论 -
Hbase java api
HBase Java API类介绍http://www.cnblogs.com/ggjucheng/p/3380267.html 几个相关类与HBase数据模型之间的对应关系java类 HBase数据模型HBaseAdmin 数据库(DataBase)HBaseConfigurationHTable 表(Table)HTableDescriptor 列族(Col...原创 2016-02-02 13:50:39 · 67 阅读 · 0 评论 -
HBASE数据类型
http://phoenix.apache.org/language/datatypes.htmlIndexINTEGER TypeUNSIGNED_INT TypeBIGINT TypeUNSIGNED_LONG TypeTINYINT TypeUNSIGNED_TINYINT TypeSMALLINT TypeUNSIGNED_SMALLINT Type...原创 2016-01-22 17:26:13 · 6477 阅读 · 0 评论 -
Hbase 删除列族
删除列族使用alter,也可以删除列族。下面给出的是使用alter删除列族的语法。hbase> alter ‘ table name ’, ‘delete’ => ‘ column family ’ 下面给出的是一个例子,从“emp”表中删除列族。假设在HBase中有一个employee表。它包含以下数据:hbase(main):006:0> scan '...原创 2016-11-03 14:23:25 · 6636 阅读 · 0 评论 -
基于Solr的HBase多条件查询测试
基于Solr的HBase多条件查询测试http://blog.csdn.net/kky2010_110/article/details/12970029/原创 2016-05-19 13:11:34 · 83 阅读 · 0 评论 -
Hbase的SQL接口之Phoenix应用总结
Hbase的SQL接口之Phoenix应用总结http://www.myexception.cn/sql/1252220.htmlhttp://outofmemory.cn/code-snippet/7570/phoenix-jdbc-query-console-application[code="java"]public class TestWriter { public...原创 2014-09-19 11:46:55 · 136 阅读 · 0 评论 -
Hbase系统架构
http://www.cnblogs.com/shitouer/archive/2012/06/04/2533518.htmlHBase 数据模型组成部件说明:Row Key: Table主键 行键 Table中记录按照Row Key排序Timestamp: 每次对数据操作对应的时间戳,也即数据的version numberColumn Family: ...原创 2016-03-22 11:11:41 · 79 阅读 · 0 评论