JonsyChan-CSDN博客

使用Apache Phoenix 实现 SQL 操作HBase

Apache Phoenix 相信大家并不陌生，它是HBase的SQL驱动，Phoenix 使得Hbase 支持通过JDBC的方式进行访问，并将你的SQL查询转换成Hbase的扫描和相应的动作。兼容性：Phoenix 2.x - HBase 0.94.xPhoenix 3.x - HBase 0.94.xPhoenix 4.x - HBase 0.9...

2015-01-27 16:17:08 359

Apache Kafka 集群环境搭建

Apache Kafka 是一个高吞吐量分布式消息系统，由LinkedIn开源。引用官网对kafka的介绍：“Apache Kafka is publish-subscribe messaging rethought as a distributed commit log.” “publish-subscribe”是kafka设计的核心思想，也是kafka最具特色的地方。publish在kak...

2015-01-14 16:24:56 467

Apache Storm 集群环境搭建

Apache storm 是一个由twitter开源的大数据处理系统，与其他系统不同的是，storm旨在用于分布式实时处理并且与语言无关。笔者所认知的storm使用场景诸如实时日志分析、网站用户行为实时分析、实时计算等，目前很多公司也都把storm作为自己的大数据架构的一部分，来实现一些实时业务的处理。相信大家都和我有一样的认知，那就是现在的技术都是项目驱动模式，没有最好的技术，只有最适...

2015-01-13 18:24:24 136

Apache Zookeeper 集群环境搭建

Zookeeper 是一个分布式。开放源码的分布式应用程序协调服务，是Google Chubby的一个开源实现，大多数的分布式应用都需要Zookeeper的支持，这篇文章先简单的和大家分享如何搭建一个zookeeper集群。（笔者注：Chubby是一个lock service，通过这个lock service可以解决分布式中的一致性问题。为这个lock service的实现是一个分布式的文件系...

2015-01-13 16:23:14 125

MongoDB的连接池和连接管理

在关系型数据库中，我们总是需要关闭使用的数据库连接，不然大量的创建连接会导致资源的浪费甚至于数据库宕机。这篇文章主要想解释一下mongoDB的连接池以及连接管理机制，如果正对此有疑惑的朋友可以看一下。通常我们习惯于new 一个connection并且通常在finally语句中调用connection的close()方法将其关闭。正巧，mongoDB中当我们new一个Mongo的时候，会发现...

2014-08-27 16:07:26 3058

MongoDB 在多线程高并发下的问题

最近项目用到 MongoDB , 主要是一些读取数据及改状态位的操作. 因为是结合了最近流行的 Storm进行大数据的分析处理，并将分析结果插入Vertica数据库，所以在多线程高并发的情境下, 会发现 Vertica 数据库中有部分重复的数据. 这到底是什么原因导致的呢？笔者开始也是一筹莫展，重复去看 MongoDB 的 API , 终于有了新发现：com.mongodb.DB 这个...

2014-08-26 17:09:08 5934 1

chenjunxi216的专栏