- 博客(3)
- 资源 (7)
- 收藏
- 关注
转载 canal安装及使用
1、准备:github:https://github.com/alibaba/canal里面有包括canal的文档,server端 client端的 例子 源码包等等。2、canal概述:canal是应阿里巴巴存在杭州和美国的双机房部署,存在跨机房同步的业务需求而提出的。早期,阿里巴巴B2B公司因为存在杭州和美国双机房部署,存在跨机房同步的业务需求。不过早期的数据库同步业务,主...
2016-02-26 17:11:51 8769 1
原创 Flume+Kafka整合
1.下载flume-kafka-plus:https://github.com/beyondj2ee/flumeng-kafka-plugin在该项目中提取以下jar包放入环境中flume的lib下还有package目录的flumeng-kafka-plugin.jar包一并放到flume的lib目录下flume配置文件:#agentproducer.sources = ...
2016-02-23 18:33:54 761
转载 Hadoop之MapReduce自定义二次排序流程实例详解
一、概述MapReduce框架对处理结果的输出会根据key值进行默认的排序,这个默认排序可以满足一部分需求,但是也是十分有限的。在我们实际的需求当中,往往有要对reduce输出结果进行二次排序的需求。对于二次排序的实现,网络上已经有很多人分享过了,但是对二次排序的实现的原理以及整个MapReduce框架的处理流程的分析还是有非常大的出入,而且部分分析是没有经过验证的。本文将通过一个实际的M
2016-02-14 16:40:09 825
hive操作命令
2014-06-30
spring3mvc入门资料
2013-09-25
spring mvc
2013-09-25
spring xfire
2013-09-25
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人