fannk的博客

原创 数据迁移方案及优化

 1.迁移的流程 数据通过Ogg抽取Oracle增量数据到苏州flume集群在flume集群对数据脱敏同步数据到kafka集群在滨江数据拉取数据到hbase集群 优化（1）可扩展性保证没有单点性能问题，每个流程都是可扩展的。苏州flume集群，滨江kafka集群，滨江flume集群都是可以横行扩展的 （2）性能保证数据能够更快的迁移到苏州集群，原...