![](https://img-blog.csdnimg.cn/20201014180756922.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
flume
gongpulin
这个作者很懒,什么都没留下…
展开
-
Flume架构以及应用介绍
http://blog.csdn.net/a2011480169/article/details/51544664在具体介绍本文内容之前,先给大家看一下Hadoop业务的整体开发流程: 从hadoop的业务开发流程图中可以看出,在大数据的业务处理过程中,对于数据的采集是十分重要的一步,也是不可避免的一步,从而引出我们本文的主角—Flume。本文将围绕Flume的架构、Flum转载 2017-07-08 18:41:58 · 250 阅读 · 0 评论 -
利用Flume将MySQL表数据准实时抽取到HDFS
http://blog.csdn.net/wzy0623/article/details/73650053一、为什么要用到Flume 在以前搭建HAWQ数据仓库实验环境时,我使用Sqoop抽取从MySQL数据库增量抽取数据到HDFS,然后用HAWQ的外部表进行访问。这种方式只需要很少量的配置即可完成数据抽取任务,但缺点同样明显,那就是实时性。Sqoop使用MapReduc转载 2017-07-08 21:18:43 · 669 阅读 · 0 评论