ES查询优化手段

本文详细阐述了在IT项目中如何通过日期模板创建索引、索引管理、冷热分离存储、写入性能优化(如批量写入和禁用刷新)以及查询优化(如禁用wildcard和利用倒排索引)来提升系统性能和存储效率。
摘要由CSDN通过智能技术生成

设计阶段调优
( 1)根据业务增量需求,采取基于日期模板创建索引,通过 roll over API 滚动索引;( 2)使用别名进行索引管理;
( 3)每天凌晨定时对索引做 force_merge 操作,以释放空间;
( 4)采取冷热分离机制,热数据存储到 SSD,提高检索效率;冷数据定期进行shrink操作,以缩 减存储;
( 5)采取 curator 进行索引的生命周期管理;
( 6)仅针对需要分词的字段,合理地设置分词器;
( 7 )Mapping 阶段充分结合各个字段的属性,是否需要检索、是否需要存储等。
写入调优
( 1)写入前副本数设置为 0;
( 2)写入前关闭 refresh_interval 设置为-1,禁用刷新机制;
( 3)写入过程中:采取 bulk 批量写入;
( 4)写入后恢复副本数和刷新间隔;
( 5)尽量使用自动生成的 id。
查询调优
( 1)禁用 wildcard ;
( 2)禁用批量 terms(成百上千的场景);
( 3)充分利用倒排索引机制,能 keyword 类型尽量 keyword ;
( 4)数据量大时候,可以先基于时间敲定索引再检索;
( 5)设置合理的路由机制。
其他调优
部署调优,业务调优等。

  • 9
    点赞
  • 9
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

默海情深以往

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值