分布式
woibu
这个作者很懒,什么都没留下…
展开
-
实时抓取MySQL的更新数据到Hadoop canal
转载自: http://bigdatadecode.club/实时抓取MySQL的更新数据到Hadoop.html关系型数据库和Hadoop生态的沟通越来越密集,时效要求也越来越高。本篇就来调研下实时抓取MySQL更新数据到HDFS。本篇仅作为调研报告。初步调研了canal(Ali)+kafka connect+kafka、maxwell(Zendesk)+转载 2017-07-11 14:28:14 · 18470 阅读 · 5 评论 -
multipleInput
MultipleInputs处理多输入源,本例子包括 windows上的MySQL数据库数据和hdfs上的文本数据。mysql数据:hdfs数据:[java] view plain copy print?[root@baolibin ~]# hadoop fs -text /input/转载 2017-07-07 19:08:13 · 446 阅读 · 0 评论