ES 重建索引

重建索引
一个field的设置是不能被修改的,如果要修改一个Field,那么应该重新按照新的mapping,建立一个index,然后将数据批量查询出来,
重新用bulk api写入index中批量查询的时候,建议采用scroll api,并且采用多线程并发的方式来reindex数据,每次scoll就查询指定
日期的一段数据,交个一个线程即可
1. 一开始,依靠dynamic mapping 插入数据,但是不小心有些数据是2019-90-09这种日期格式的,所以title这种field被自动映射为
date类型,实际上它是string类型的
PUT /myindex/type/3
{
    "title":"2018-02-03"
}

{
    "myindex":{
        "mappings":{
            "type":{
                "properties":{
                    "title":{
                        "type":"date"
                    }
                }
            }
        }
    }
}

2. 当后期向索引中加入string类型的title值的时候,就会报错
3. 如果此时想修改title的类型,是不可能的
4. 此时,唯一的办法,就是进行reindex,也就是说,重新建立一个索引,将旧索引的数据查询出来,再导入新索引
5. 如果说旧索引的名字,是old_index,新索引的名字是new_index,终端java应用,已经在使用old_index在操作了,难道还要去
停止java 应用修改使用的index为new index重新启动java应用么,这个过程中,就会导致java应用停机,可用性降低
6. 所以说,给java应用一个别名,这个别名是指向旧索引的,java应用先用着,java应用先用goods_index alias来操作,此时实际
指向的是旧的index
PUT /myindex/_alias/goods_index
7. 新建一个index,调整其title的类型为string
PUT /myindex_new
{
    "mappings":{
        "type":{
            "properties":{
                "title":{
                    "type":"text"
                }
            }
        }
    }
}
8. 使用scroll api,将数据批量查询出来
GET /myindex/_search?scroll=1m
{
    "query":{
        "match_all"{}
    },
    "sort":["doc"],
    "size":1000
}

9. 采用bulk api将scoll查出来的一批数据,批量写入新索引
POST /bulk
{"index":{"_index":"myindex_new","_type":"test_type","_id":"2"}}
{"title":"2017-01-02"}

10.反复循环8-9查询一批又一批的数据出来,采用bulk api将每一批数据批量写入新索引
11.将goos_index alias切换到myindex_new上去,java应用会直接通过idnex别名使用新的索引中的数据,java应用程序不需要停机,
零停机
POST /_alias
{
    "actions":[
        {"remove":{"index":"myindex","alias":"goods_index}},
        {"add":{"index":"my_index_new","alias":"goods_index"}}
    ]
}

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
Elasticsearch是一个强大的全文搜索引擎,用于实时数据分析和存储。如果你需要重建索引,通常是由于以下原因: **如何重建索引:** 1. **登录Elasticsearch集群:** 使用Kibana、Logstash或直接通过命令行工具(如curl)连接到你的Elasticsearch节点。 2. **确定要重建索引:** 在`/_cat/indices` API中查找你要重置或重建索引名称。 3. **暂停索引:** 在索引命名空间运行`PUT /your_index_name/_settings`并设置`index.blocks.write = true`,以防新数据写入影响重建过程。 4. **删除旧索引:** 使用`DELETE /your_index_name`删除现有的索引,但要注意这将丢失所有未备份的数据。 5. **创建新的索引:** 发起一个新的索引请求,例如`PUT /your_new_index_name`。你可以指定新索引的配置选项,比如分片数、副本数等。 6. **重新映射数据:** 如果需要,可以在新的索引上运行`POST /_reindex`操作,将老索引中的文档迁移到新索引。如果不需要迁移,可以跳过此步骤。 7. **恢复索引状态:** 当数据迁移完成后,取消对旧索引的封锁,即执行`PUT /your_index_name/_settings`并设置`index.blocks.write = false`。 8. **验证重建:** 最后,检查新索引的状态是否正常,可以通过`GET /_cat/health`查看集群健康状况。 **相关问题--:** 1. 如何防止数据丢失在重建过程中? 2. 是否可以直接在现有索引重建而无需先删除? 3. 新建索引时如何处理字段类型变化导致的问题?
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值