druid.io数据迁移

``在druid.io的开发过程中,遇到需要将druid.io的某个dataSource数据迁移到另外一个集群的问题,在开发过程中,发现一种解决方式,其具体实步骤如下:
第一步:将需要迁移的dataSource的segment复制一份到另外一个druid.io集群的segment存储目录下,我们是存在OSS目录下的, 所以可以使用OSS的工具复制到新目录就可以了.
第二步:将老druid.io集群上的元数据导出一份,然后倒入到新集群的元数据存储的数据库中,
在这里插入图片描述
第三步:由于元数据中druid_segments表中的payload字段的segment的存储路径仍然指向原来的就群的segment的存储路径,所以在这里我们需要,使用新集群的druid.io的segment的存储路径替换原来路径

在这里插入图片描述

update druid_segments  set `payload` = replace(payload,'oss://icsoc-emr-hadoop/druid/','oss://icsoc-emr-hadoop/druid-test/')

例如该示例中就是将oss://icsoc-emr-hadoop/druid/ 替换为oss://icsoc-emr-hadoop/druid-test/
按照上面的操作,就完成了一个土方法,实现druid.io集群迁移.
备注:
上面的元数据迁移,也可以根据自己的个人需要迁移,并不一定要把所有的表都导入新集群的原始数据中,正常情况下只需要到入druid_segment表,就可以完成集群的基本迁移了.

https://support.imply.io/hc/en-us/articles/115004960053-Migrate-existing-Druid-data-to-a-new-Imply-cluster
  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 2
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 2
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值