hbase
文章平均质量分 83
个人渣记录仅为自己搜索用
不盈利,只为分享,转载.
找到的原版url的,尽量会贴原版url.
如有版权侵犯,请留言删除.
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
hbase 一致性 问题思考
搜索了下 hbase 和 paxos .说 hbase 本身的 hdfs 和 paxos 无关. 后来又发现一篇文章浅谈Hbase 的强一致性 : 从一开始就知道hbase是CAP中的CP系统,即hbase是强一致性的.我原来一直以为hbase的强一致性是因为底层的HDFS写入时,必须所有副本都写入成功才能返回.最近才想明白,hbase之所以是CP系统,实际和底层HDFS无关,原创 2017-09-25 12:17:49 · 1812 阅读 · 0 评论 -
HBase 在淘宝的应用和优化小结
下载: http://walkoven.com/hbase:optimization and apply summary in taobao.pdf 1 前言 hbase是从hadoop中分离出来的apache顶级开源项目。由于它很好地用java实现了google的bigtable系统大部分特性,因此在 数据量猛增的今天非常受到欢迎。对于淘宝而言,随着市场规模的扩大,产品与技术的发展,业务转载 2017-09-18 21:08:31 · 649 阅读 · 0 评论 -
hbase 压测结果
环境配置: 测试表有 60个 region ,分布在3台机器上 . 24个线程并发执行. 测试数据: 1k 大小 10个字段. 压测结果: 1. 基本上写都很快 20us 2. 读相对比较慢 400us 3. 范围读慢点 18ms , gc 也频繁 tps : 同时读写 160801 tps ; 95%读 tps 109895 ; 95%范围读 11398 单原创 2017-09-19 18:36:25 · 1099 阅读 · 0 评论 -
HDFS只支持文件append操作,不可变, 而依赖HDFS的HBase如何完成增删改查功能update
转自: http://blog.csdn.net/liqianyuan2009/article/details/45507157 1. HDFS的文件append功能 不可变 早期版本的HDFS不支持任何的文件更新操作,一旦一个文件创建、写完数据、并关闭之后,这个文件就再也不能被改变了。为什么这么设计?是为了与MapReduce完美配合,MapReduce的工作模式是接受一系列输入文转载 2018-01-16 17:13:39 · 4782 阅读 · 2 评论 -
HBase Region regionServer 分裂 原理,过程
1. 架构图 其中 dfsClient 是 hdfs 的客户端组件. 2. HBase Region分裂 regionServer 关于HBase报错org.apache.hadoop.hbase.NotServingRegionException的异常分析 附录: hbase 一致性 问题思考 2.转载 2017-09-25 12:07:42 · 1235 阅读 · 0 评论 -
hbase hive elasticsearch ( elsearch es ) mysql mongodb 技术选型
1. hbase: hbase + phoenix: 强大的大数据 key-value + 大数据关系型引擎 (无 join,join 性能差) 单节点,可靠性差. 深入HBase架构解析(一) 详细模块图,和流程图 读写流程模块图, 无读写时序图. 启动注册流程,读写流程. 水平扩容, rowKey 设置要小心. 写快,读慢 (通过副本,和 分区 split )原创 2017-09-13 12:16:01 · 3317 阅读 · 1 评论 -
360自研分布式存储系统Bada的架构设计和应用
这篇文章干货满满,1. 既有调研对比 bigtable,cassandra 2.又有自身设计的说明. 对可靠性,可用性都说的很明白. 扩容等. 360自研分布式存储系统Bada的架构设计和应用 2015-07-29 09:50 陈宗志 高可用架构微信号 字号:T | T 本文作者主要向大家介绍了360自主研发的分布式存储系统Nosql-Bada,以以作者本人在设转载 2018-01-17 00:59:17 · 2139 阅读 · 0 评论
分享