ElasticSearch实现逻辑

我们单独做了一个搜索微服务,使用的ElasticSearch,一个全文检索引擎,我们使用IK分词器进行中文分词。我们为什么用ES呢?因为首先我们的商品数据量比较大,其次搜索匹配如果是在mysql中,必须进行模糊查询,但是前置模糊会导致索引失效,所以我们使用了ElasticSearch来做商品数据的检索。我们在项目中使用的是SpringDataElasticSearch框架来操作ES。

ES这一块大体的实现逻辑分为3个部分:

  1. mysql中商品数据全量导入ES中

    我们写了一个单元测试(@Test)脚本,在脚本中,我们使用feign组件异步查询商品微服务,同时借助分页查询实现分批量导入,每次查询100条数据,进行数据的组装,使用springDataElasticSearch的API插入到索引库中。

  2. 增量数据同步

    在管理进行商品上下架的时候,需要进行索引库数据的同步。这时候,商品微服务会发出一个MQ消息,我们搜索微服务作为MQ的消费者进行消费,比如上架的时候,因为MQ消息只传过来了一个商品Id,我们通过feign组件进行数据查询,然后进行数据组装,插入到索引库中,如果是下架的话,直接进行索引库数据的删除即可。

  3. 实现前台的分页检索

    我们使用一个all来接收前台传过来的用户检索的关键字,使用springDataElasticSearch来进行分页检索,直接响应给前台分页信息和具体数据。

  • 1
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
Elasticsearch是一个开源的实时分布式搜索和分析引擎,可以用于存储、搜索和分析各种类型的数据。在Elasticsearch中,聚合(Aggregation)是一种用于对数据进行分析和汇总的功能,可以根据一定的条件和计算逻辑对数据进行分组、过滤、统计等操作。 要实现替换功能,可以通过聚合数据来实现。首先,需要确定需要替换的字段和替换的值。然后,可以使用聚合操作来找到符合条件的文档并进行替换。 首先,需要使用聚合操作来聚合数据并获取符合条件的文档列表。可以使用诸如terms、range、filter等聚合操作来定义条件。例如,使用terms聚合操作来根据某个字段的值进行分组,然后使用filter聚合操作来过滤符合条件的文档。 接下来,可以使用bucket_selector聚合操作来对符合条件的文档进行替换。bucket_selector聚合操作可以根据一定的条件来选择要保留或删除的桶。可以使用script脚本来定义替换的逻辑。例如,可以通过script脚本来修改文档字段的值,实现替换功能。 最后,可以根据需要进行数据的持久化操作。可以使用index操作将修改后的数据重新索引到Elasticsearch中,以便后续的搜索和分析操作。 总之,通过使用Elasticsearch的聚合功能,可以方便地对数据进行分析和汇总,并实现替换功能。通过合理地定义聚合操作和使用适当的脚本,可以灵活地对数据进行处理,从而满足各种需求。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值