2014年11月_小桥

11月 10月 08月 07月 05月 04月 03月 02月 01月

转载 zookeeper代码解析

zookeeper代码解析 ZooKeeper是近期比较热门的一个类Paxos实现。也是一个逐渐得到广泛应用的开源的分布式锁服务实现。被认为是Chubby的开源版，虽然具体实现有很多差异。ZooKeeper概要的介绍可以看官方文档：http://hadoop.apache.org/zookeeper 这里我们重点来看下它的内部实现。 ZooKeeper集群中的每个server都

2014-11-26 21:20:06 761

原创 kafka 2.10-8.1.1安装

1. 解压安装包 2. 配置server.properties (现在线上配置) 目录在 config 下，修改配置信息修改 broker.id 为不同的值0 ，1 ，2 ... host.name 设置IP 供连接使用 zookeeper.connect 设置 zk 地址例如：zkhost1:port1,zkhost2:port2,zkhost3:port3/kafk

2014-11-20 17:00:08 1835

转载 HBase性能调优

因官方Book Performance Tuning部分章节没有按配置项进行索引，不能达到快速查阅的效果。所以我以配置项驱动，重新整理了原文，并补充一些自己的理解，如有错误，欢迎指正。配置优化 zookeeper.session.timeout 默认值：3分钟（180000ms）说明：RegionServer与Zookeeper间的连接超时时间。当超时时间到后，ReigonSe

2014-11-12 20:38:54 693

转载 HBase性能优化方法总结（四）：数据计算

本文主要是从HBase应用程序设计与开发的角度，总结几种常用的性能优化方法。有关HBase系统配置级别的优化，可参考：淘宝Ken Wu同学的博客。下面是本文总结的第四部分内容：数据计算相关的优化方法。 4. 数据计算 4.1 服务端计算 Coprocessor运行于HBase RegionServer服务端，各个Regions保持对与其相关的coprocessor实现类的

2014-11-12 18:00:27 741

转载 HBase性能优化方法总结（三）：读表操作

本文主要是从HBase应用程序设计与开发的角度，总结几种常用的性能优化方法。有关HBase系统配置级别的优化，可参考：淘宝Ken Wu同学的博客。下面是本文总结的第三部分内容：读表操作相关的优化方法。 3. 读表操作 3.1 多HTable并发读创建多个HTable客户端用于读操作，提高读数据的吞吐量，一个例子： static final Configurat

2014-11-12 17:59:39 879

转载 HBase性能优化方法总结（二）：写表操作

本文主要是从HBase应用程序设计与开发的角度，总结几种常用的性能优化方法。有关HBase系统配置级别的优化，可参考：淘宝Ken Wu同学的博客。下面是本文总结的第二部分内容：写表操作相关的优化方法。 2. 写表操作 2.1 多HTable并发写创建多个HTable客户端用于写操作，提高写数据的吞吐量，一个例子： static final Configurat

2014-11-12 17:58:46 684

转载 HBase性能优化方法总结（一）：表的设计

本文主要是从HBase应用程序设计与开发的角度，总结几种常用的性能优化方法。有关HBase系统配置级别的优化，可参考：淘宝Ken Wu同学的博客。下面是本文总结的第一部分内容：表的设计相关的优化方法。 1. 表的设计 1.1 Pre-Creating Regions 默认情况下，在创建HBase表的时候会自动创建一个region分区，当导入数据的时候，所有的HBase客户

2014-11-12 17:56:30 629

原创 kafka 操作中

kafka的一些操作命令：

2014-11-08 16:13:29 1854 2

原创 kafka 集群运维和使用

最近在维护kafka集群，遇到了很多问题都需要记录下， 1. kafka 的topic 级别的配置修改

2014-11-08 14:43:19 17670 13

腾讯深度学习平台（译）

腾讯深度开发平台翻译文档，介绍深度学习平台架构等，有很好的学习价值，值得大家学习一下

2014-08-14

MFS文件系统使用手册.pdf

MFS文件系统使用手册，新手学习还是很不错的，大家可以学习一下

2014-01-09

基于事件的 NIO 多线程服务器（源码）

基于事件的 NIO 多线程服务器（源码）可以根据博客中的描述对照学习

2013-07-22

VMware-ESXI-5.0.0 key

2013-01-10

Oracle知识库

1.Oracle知识 2.DBA 3.Exp vs Imp 4.SQL技巧 5.Oracle错误 6.Oracle初学者入门 7.Oracle安装与删除 8.Oracle安全性问题 9.Oracle系统设置，优化，链接 10.索引，序列，快照，数据库链路，触发器 11.Oracle及其其他数据库比较 12.linux vs unix 13.Develop 2000

2012-10-24