360自研分布式存储系统Bada的架构设计和应用

这篇文章干货满满,1. 既有调研对比 bigtable,cassandra 2.又有自身设计的说明. 对可靠性,可用性都说的很明白. 扩容等. 360自研分布式存储系统Bada的架构设计和应用 2015-07-29 09:50 陈宗志 高可用架构微信号 字号:T | T 本文作者主要...

2018-01-17 00:59:17

阅读数 967

评论数 0

HDFS只支持文件append操作,不可变, 而依赖HDFS的HBase如何完成增删改查功能update

转自: http://blog.csdn.net/liqianyuan2009/article/details/45507157 1. HDFS的文件append功能 不可变 早期版本的HDFS不支持任何的文件更新操作,一旦一个文件创建、写完数据、并关闭之后,这个文件就再也不能被改变...

2018-01-16 17:13:39

阅读数 2290

评论数 1

hbase 一致性 问题思考

搜索了下 hbase 和 paxos .说 hbase 本身的 hdfs 和 paxos 无关. 后来又发现一篇文章浅谈Hbase 的强一致性 :     从一开始就知道hbase是CAP中的CP系统,即hbase是强一致性的.我原来一直以为hbase的强一致性是因为底层的HDFS写入时,必须...

2017-09-25 12:17:49

阅读数 663

评论数 0

HBase Region regionServer 分裂 原理,过程

1. 架构图    其中 dfsClient 是 hdfs 的客户端组件. 2. HBase Region分裂 regionServer 关于HBase报错org.apache.hadoop.hbase.NotServingRegionException的异常分...

2017-09-25 12:07:42

阅读数 607

评论数 0

hbase 压测结果

环境配置:   测试表有 60个 region ,分布在3台机器上 .  24个线程并发执行. 测试数据: 1k 大小 10个字段. 压测结果:  1. 基本上写都很快 20us  2. 读相对比较慢 400us 3. 范围读慢点  18ms , gc 也频繁 tps :  同时读写 1...

2017-09-19 18:36:25

阅读数 566

评论数 0

HBase 在淘宝的应用和优化小结

下载: http://walkoven.com/hbase:optimization and apply summary in taobao.pdf 1 前言 hbase是从hadoop中分离出来的apache顶级开源项目。由于它很好地用java实现了google的bigtable系统大部分特性...

2017-09-18 21:08:31

阅读数 430

评论数 0

hbase hive elasticsearch(elsearch) mysql mongodb 技术选型

1. hbase:  hbase + phoenix: 强大的大数据 key-value + 大数据关系型引擎 (无 join,join 性能差)    单节点,可靠性差. 深入HBase架构解析(一) 详细模块图,和流程图 读写流程模块图, 无读写时序图. 启动注册流程,读写流程....

2017-09-13 12:16:01

阅读数 1350

评论数 0

提示
确定要删除当前文章?
取消 删除
关闭
关闭