大数据处理
文章平均质量分 79
hhfwn
这个作者很懒,什么都没留下…
展开
-
开源实时流处理系统小结
开源实时流处理系统小结作者: 大圆那些事 | 文章可以转载,请以超链接形式标明文章原始出处和作者信息网址: http://www.cnblogs.com/panfeng412/archive/2013/02/21/open-source-real-time-stream-processing-systems.html这里对目前业界开源的一些实时流处理系统做一次小结,作为日后进行转载 2013-11-14 10:50:58 · 582 阅读 · 0 评论 -
Storm安装配置
本篇幅讲述Twitter Storm安装配置,也作为自己的笔记。storm的官方安装说明(e文):https://github.com/nathanmarz/storm/wiki/Setting-up-a-Storm-clusterstorm的安装分为单机版和集群版,只是配置稍微有点区别,大致一样。要使用storm首先要安装以下工具:python、zookeeper转载 2013-11-14 16:42:44 · 4512 阅读 · 0 评论 -
Storm使用到的相关技术总结
作者: 大圆那些事 | 文章可以转载,请以超链接形式标明文章原始出处和作者信息网址: http://www.cnblogs.com/panfeng412/archive/2012/12/16/storm-related-technique-summary.htmlStorm作为一个开源的分布式实时流计算框架,其内部实现使用了一些常用的技术,这里是对这些技术及其在Storm中作用的概转载 2013-11-14 11:21:47 · 791 阅读 · 0 评论 -
Sqoop详细介绍包括:sqoop命令,原理,流程
Sqoop详细介绍包括:sqoop命令,原理,流程一简介Sqoop是一个用来将Hadoop和关系型数据库中的数据相互转移的工具,可以将一个关系型数据库(例如 : MySQL ,Oracle ,Postgres等)中的数据导进到Hadoop的HDFS中,也可以将HDFS的数据导进到关系型数据库中。二特点Sqoop中一大亮点就是可以通过hadoop的转载 2014-08-28 10:48:22 · 7009 阅读 · 1 评论