Elasticsearch 大文本字段中的中文精确查询

最新推荐文章于 2024-07-25 18:31:33 发布

weixin_34355881

最新推荐文章于 2024-07-25 18:31:33 发布

阅读量1.5k

点赞数

文章标签：大数据 java python

原文链接：https://my.oschina.net/u/3611008/blog/2873581

版权

2019独角兽企业重金招聘Python工程师标准>>>

中文精确查询用Elasticsearch怎么做？ Google了不少文章，个人觉得没有抓住重点，或者Elasticsearch升级后有所改变。

背景介绍

前人精品文章推荐
简单来讲，从Elasticsearch设计的初衷来讲， match查询用来做搜索引擎类似的评分查询，精确匹配查询用term来做，参见各种Elasticsearch的手册，不展开。中文的精确查询由于存在index保存阶段的分词和search阶段的分词，所以直接沿用这些方法并不适用。

问题：中文查询用match能查到，用term查不到。

准确的说是比如字段 title:北京奥运，查找 “北京奥运” ok, 查找 “北京” 没有，查找"北"在默认情况下可以找到很多。

转载于:https://my.oschina.net/u/3611008/blog/2873581

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

weixin_34355881

关注关注

0
点赞
踩
0

收藏

觉得还不错? 一键收藏
0
评论
复制链接

分享到 QQ

分享到新浪微博

扫一扫

如何使用elasticsearch对text类型字段进行精准搜索呢？

悟已往之不谏，知来者之可追

09-18

6278

match 查询是否可行对一个es中的text类型的字段进行精准搜索，可谓有点棘手。最初级的方式就是建立改字段的时候指定属性unanalysed,也就是不分析，那不分析当然可以精准搜了。但是这样一来，搜索除非精准，否则大部分都是无结果。使用match查询，有几率可以将精准搜结果召回，但是不保证100%。 curl -X GET "localhost:9200/_search?pretty" -H 'Content-Type: application/json' -d' { "query": {

【硬刚ES】ES入门 (7) 语法（5）DQL（2）关键字精确查询/多关键字精确查询/指定查询字段/过滤字段

微信搜：import_bigdata，大数据领域硬核原创作者

10-13

656

本文是对《【硬刚大数据之学习路线篇】从零到大数据专家的学习指南(全面升级版)》的ES部分补充。 5 关键字精确查询 term 查询，精确的关键词匹配查询，不对查询条件进行分词。在 Postman 中，向 ES 服务器发 GET 请求：http://127.0.0.1:9200/student/_search 服务器响应结果： 6 多关键字精确查询 terms 查询和 term 查询一样，但它允许你指定多值进行匹配。如果这个字段包含了指定值中的任何一个值，那么这个文档.

参与评论您还未登录，请先登录后发表或查看评论

linux下修改文件查看样式(日期/文件大小)

weixin_45203607的博客

08-19

805

linux下修改文件查看样式(日期/文件大小)

ElasticSearch(六)— 全文检索

最新发布

敲代码的小小酥的博客

07-25

2451

前面讲到的query中的查询，都是精准查询。可以理解成跟在关系型数据库中的查询类似。match系列的查询，是全文检索的查询。会通过分词进行评分，匹配，再返回搜索结果。

es8 text类型使用term精确查询失效

lxw1844912514的博客

04-11

2589

布尔查询: must：必须匹配每个子查询，类似“与”;should：选择性匹配子查询，类似“或”;must_not：必须不匹配，不参与算分，类似“非”;filter：必须匹配，不参与算分bool.must:适用于精确查询,并且如果使用多个term的话不能适用于同一个字段,多值而适用于多个字段match:根据一个字段查询,在匹配时会对所查找的关键词进行分词，然后按分词匹配查找，而term会直接对关键词进行查找。一般模糊查找的时候，多用match，而精确查找时可以使用term。

ElasticSearch学习（五）ElasticSearch基本操作：精确查询

好好学习天天向上

12-08

3911

ES最关键的地方就在于查询 2、带参查询 3、分页查询 5、全文检索（在所有有索引的字段上进行检索） 6、数据结构查询二.DSL 关于查询，理解match和term的区别是非常重要的。 match和term最大的差别在于，查询条件是否分词。举例说明 “xiaomi phone”，如果使用match查询是会分成两个词：xiaomi+phone，如果使用的是term则查询条件不分词：xiaomi phone。match查询的是key对应的value，这里的key和value都会分词。 2.match

ES索引写入性能优化

zhutianrong520的博客

12-21

973

最近一直想总结一篇es的优化文章，看了几篇博客，总结一下，方便以后遇上es线上优化问题有参考之处： 1、用bulk批量写入 es批量写入时，应该使用es的bulk写入，bulk写入还是应该考虑es的node数，shard分片数。业务中尽量将写入es的数据聚合起来分批写入。 bulk批量写入的性能比你一条一条写入大量的document的性能要好很多。但是如果要知道一个bulk请求最佳的大小，需要对单...

【ElasticSearch（九）进阶】Term精确数值查询，match keyword精确文本查询

u012161251的博客

08-24

1312

【ElasticSearch(九)进阶】Term精确数值查询，match keyword精确文本查询一、Term精确数值查询 term查询，会返回那些在提供的字段中包含确切信息的文档内容。查询text字段值，使用match。查询精确数值，使用term。为什么避免使用term对text字段进行查询？默认情况下，ES更改text字段的值作为词法分析的一部分。这会使查找text...

【Elasticsearch】ES精确查询和范围查询，ES时间字段排序实例，ES倒排索引介绍_es 范围查询

2401_84166836的博客

04-13

964

X：vip204888 （备注大数据获取）**[外链图片转存中…(img-jAhzWkOz-1712996057716)]

es根据字段长度过滤_ElasticSearch 常用的查询过滤语句

weixin_39763293的博客

12-21

2627

Filter DSLterm 过滤term主要用于精确匹配哪些值，比如数字，日期，布尔值或 not_analyzed 的字符串(未经分析的文本数据类型)：{ "term": { "age": 26 }}{ "term": { "date": "2014-09-01" }}{ "term": { "public": true }}{ "term": { ...

es从行json文件中查询相关内容

12-04

深究｜Elasticsearch单字段支持的最大字符数?

u010463032的博客

12-21

1万+

在业务系统中，遇到过两个问题：问题1：设置为keyword类型的字段，插入很长的大段内容后，报字符超出异常，无法插入。问题2：检索超过ignore_above设定长度的字段后，无法返回结果。思考：Elasticsearch单字段支持的最大字符数？设置ignore_above之后引申的问题： 1、ignore_above的作用？ ES中用于设置超过设定字符后，

elasticsearch查询操作（语句方式）_es模糊查询语句

2401_84160325的博客

04-08

3863

外链图片转存中…(img-QxFKgvkt-1712516484786)][外链图片转存中…(img-02wGCgQb-1712516484787)]

Es 精确查找

一路向前

04-15

1万+

Es 精确查找的方式要求： Es查询：查询工单信息，输入 “测试”，查出 form_name 为字段中有查询出有符合内容的数据 term：单字段精确查询： { "from": 0, "size": 20, "query": { "bool": { "should": [{ "term": { "form_name": "测试" } } ] } } } 记录是存在的，但是没有查出来？为啥呢...

spring boot es 支持中文精准查询的方法QueryBuilders.termQuery

qq_2300688967的博客

04-10

7245

1，问题：当我们使用QueryBuilders.termQuery方法对指定的字段进行精准查询时，如果查询的条件为英文字母时，是没有问题的当查询条件为中文时，则可能会查询不出数据，如下：当algorithmTag为中文时，即使es中有对应的记录，也是查询不出来的 @Override public List<ESXTopicIndex> listByAlgorithmTag(String algorithmTag, int from, int size, int sta

ES中如何对text字段进行精确匹配

热门推荐

弹指天下

08-13

1万+

在实际使用ES过程中，经常会遇到这样的问题：既需要对一个字段进行全文检索，又要对该字段进行等值查询。全文检索的字段类型需要设置为text，而text字段类型又不支持term等值查询。那么怎么解决这个问题呢？答案是：通过fields进行多字段配置

es 精确查找思路以及实现过程

07-21

4846

先交代几个概念: 1. 题库题库中保存了所有的题目数据。 2.es es 是 elasticsearch ，es 同步了题库中的所有题目。 3. 重题两道题目内容完全一样的题，肉眼看起来是一样的。题目里有 latex 公式，不同的 latex 公式展示后看起来可能是一样的。 4. es 打分 es 会对匹配到的结果集进行打分，分值越高的结果越排在前面。另外，还涉及到分词、倒排索引这两个概念，这是搜索引擎的基本原理。 5. 分词一段文本在保存到倒排索引之前需要先分词，查询的时候都是按分词来匹配的。英

ElasticSearch设置索引最大字段数，字段最大数据长度

lxy的博客

09-24

3756

错误：index has exceeded [1000000] - maximum allowed to be analyzed for highlighting. es单独一个字段有大小限制 -----修改最大返回数据大小 curl -XPUT “http://ip:9200/_settings” -H ‘Content-Type: application/json’ -d’ {“index” : {“highlight.max_analyzed_offset” : 100000000}}’ 错误：Lim

ES中精确查询被分词字段

jialiang的博客

05-21

1万+

项目中，需要精确查询的一个ES字段，为text类型，text是要被分词的，整个字符串根据一定规则分解一个个term。因此一般情况下，text类型的字段，不能精确查询，keyword类型的可以使用termQuery查询。这种情况下可以使用matchPhrasePrefixQuery（...）来精确查询被分词的字段，然后再过滤一次。代码如下： public long countBy...

Elasticsearch根据字段进行查询

03-31

Elasticsearch可以根据字段进行查询，具体步骤如下： 1. 创建索引首先需要创建一个包含需要查询的字段的索引，例如： ```json PUT my_index { "mappings": { "properties": { "title": { "type": "text" }, "description": { "type": "text" }, "category": { "type": "keyword" }, "price": { "type": "float" }, "rating": { "type": "integer" } } } } ``` 这个索引包含了五个字段：`title`、`description`、`category`、`price`、`rating`。其中`title`和`description`是文本类型，`category`是关键词类型，`price`和`rating`是浮点数和整数类型。 2. 添加数据可以使用`POST`请求向索引中添加数据，例如： ```json POST my_index/_doc/1 { "title": "Elasticsearch 101", "description": "Learn the basics of Elasticsearch", "category": "Books", "price": 19.99, "rating": 4 } POST my_index/_doc/2 { "title": "Advanced Elasticsearch", "description": "Master the art of Elasticsearch", "category": "Books", "price": 29.99, "rating": 5 } POST my_index/_doc/3 { "title": "Elasticsearch for Developers", "description": "A guide to Elasticsearch for developers", "category": "Books", "price": 24.99, "rating": 4 } ``` 这里添加了三个文档，每个文档包含了五个字段。 3. 查询数据使用`GET`请求可以根据字段进行查询，例如： ```json GET my_index/_search { "query": { "match": { "title": "elasticsearch" } } } ``` 这个查询会匹配`title`字段中包含`elasticsearch`的文档。可以使用各种不同的查询类型和过滤器来根据不同的字段进行查询。例如： ```json GET my_index/_search { "query": { "bool": { "must": [ { "match": { "title": "elasticsearch" } }, { "match": { "category": "Books" } } ], "filter": { "range": { "price": { "gte": 20 } } } } } } ``` 这个查询会匹配`title`字段中包含`elasticsearch`、`category`字段等于`Books`、`price`字段大于等于`20`的文档。总之，Elasticsearch可以非常方便地根据字段进行查询，开发者可以根据需要选择不同的查询类型和过滤器来进行精确查询。