kudu
文章平均质量分 86
lijie_cq
It's never too old to learn
展开
-
Apache kudu 的DML、DQL以及DDL java api示例
马上过年了,抢了两天的火车票都没抢到。果断叫黄牛了,希望明天能帮我抢到…. apache的kudu是Cloudera开源的存储引擎,可以结合impala做实时的一些查询,小米那边就用了kudu。具体的一些东西,自己去google或者baidu吧。 由于这边后面会用到kudu的一些东西,就看了下它的文档。在网上kudu java api这一部分貌似没看到别人给demo,只有官方的github上原创 2018-01-12 22:12:18 · 8011 阅读 · 7 评论 -
canal读取mysql的binlog实时同步数据到kudu的数据异构方案
现在准备做mysql实时同步数据到kudu,为以后的实时即席查询分析做数据支撑,kudu+impala速度还是挺快的。 因为实时性要求比较高,而且需要同步的时候对mysql的压力不能太大,不然会影响业务系统的稳定性。 介于上面的一些要求,我们选择采用阿里的canal读取mysql的binlog,对binlog解析后对kudu进行操作。因为canal只是模拟mysql的slave,通过主从复制的原创 2018-01-29 13:38:47 · 7322 阅读 · 2 评论