ES数据迁移

在ES的版本升级,容器迁移等情况下,免不了进行数据迁移,如何不用前代码就实现ES的数据迁移呢:

一、同一集群内,索引间的数据迁移

{
  "conflicts": "proceed", #跳过异常
  "source": {
    "index": "seo_article",  #数据源索引
    "size": 5000, #每次迁移数量,可以没有
  },
  "dest": {
    "index": "seo_article",  #目标索引
    "version_type": "internal",
    "op_type": "create"
  }
}

二、跨集群数据迁移

1、先要在目标集群白名单内配置数据源集群信息,否则网络不通

新的集群elasticsearch.yml文件中添加如下配置:配置完成后可能需要重启集群
reindex.remote.whitelist: ["172.28.234.50:40000"] 

2、在目标集群执行命令

请求:http://11.115.235.225:40000/_reindex?wait_for_completion=false

body:

{
  "conflicts": "proceed", #跳过异常
  "source": {
    "index": "seo_article",  #数据源索引
    "size": 5000, #每次迁移数量,可以没有
    "remote": {       
      "host": "172.28.234.50:40000", #数据源的集群信息
      "socket_timeout": "1m",
      "connect_timeout": "10s"
    }
  },
  "dest": {
    "index": "seo_article",  #目标索引
    "version_type": "internal",
    "op_type": "create"
  }
}

三、根据条件进行数据迁移(跨集群需要配置白名单)

{
  "conflicts": "proceed", #跳过异常
  "source": {
    "index": "seo_article",  #数据源索引
    "size": 5000, #每次迁移数量,可以没有
    "query": {    #迁移数据的条件过滤(这里我指定最近一个月创建的)
      "range": {
        "createTime": {
          "gte": "now-30d/d"
        }
      }
    },
    "remote": {       
      "host": "172.28.234.50:40000", #数据源的集群信息
      "socket_timeout": "1m",
      "connect_timeout": "10s"
    }
  },
  "dest": {
    "index": "seo_article",  #目标索引
    "version_type": "internal",
    "op_type": "create"
  }
}

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值