elasticsearch部分调优策略

写入调优

  1. 集群首次灌入数据的时候,可以把副本的参数设置成0个,等灌入完毕了以后再调回配置的副本数,这样副本的分片只需要拷贝,节省索引过程
  2. 让es自动生成doc id。写入doc的时候如果指定了id,es会先查询判断是否需要更新,这里会读取磁盘,如果自动生成id的话就没有这个操作。
  3. 不需要建立索引的字段的index属性设置为not_analyzed或者no(不分词或者不建立索引)。这样可以降低cpu占用,尤其是binary类型,默认情况下占用CPU非常高,而这种类 型进行分词通常没有什么意义。
  4. 减少内容的长度
  5. 使用不同的分词器,如果一个字段只有英文,那么可以只使用英文的分词器,英文的分词器效率是要优于中文的
  6. 对analyzed的字段禁用norms,norms用于搜索时计算评分
PUT /worker_index
{
  "mappings": {
    "properties": {
      "name": {
        "type": "text",
        "analyzer": "ik_max_word"
      },
      "job": {
        "type": "text",
        "analyzer": "ik_max_word",
        "norms": false
      }
    }
  }
}

在这里插入图片描述

  1. 调整segment刷新间隔(默认1秒),减少刷新segment消耗的系统资源
PUT /worker_index/_settings
{
  "index": {
    "refresh_interval": "30s"
  }
}

在这里插入图片描述

  1. 使用bluk批处理请求,并且每批处理尽量路由到较少的分片上

查询优化

  1. source字段中保存了的文档的原始数据
    在这里插入图片描述
    source中不需要查询的字段可以通过includes excludes过滤

  2. 搜索时候使用Query,需要为Document的相关度打分。使用Filter,没有打分环节处理,理论上filter更快一些

  3. 如果ID字段不会被用作Range 类型搜索字段,都可以定义成keyword类型。这是因为 keyword会被优化,以便进行terms查询。Integers等数字类的mapping类型,会被优化来进行range类 型搜索。

  4. 限制查询条件

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值