elasticsearch 精确,模糊查询实例

最新推荐文章于 2024-08-13 14:56:49 发布
最新推荐文章于 2024-08-13 14:56:49 发布
阅读量3k 收藏 2
点赞数
分类专栏： elasticsearch 文章标签： 大数据 java php
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/iteye_6322/article/details/82641028
版权
实例
http://www.bubuko.com/infodetail-648214.html

GET _search
{
"query": {
"match_all": {}
}
}

PUT /useraudit

POST /useraudit/t_unparticiple_test/_mapping
{
"t_unparticiple_test": {
"properties": {
"uid": {
"type": "long"
},
"country": {
"type": "string"
},
"city": {
"type": "string"
},
"area": {
"type": "string"
},
"address": {
"type": "string"
},
"time": {
"type": "long"
}
}
}
}

POST /useraudit/t_participle_test/_mapping
{
"t_participle_test": {
"properties": {
"uid": {
"type": "long"
},
"country": {
"type": "string"
},
"city": {
"type": "string"
},
"area": {
"type": "string"
},
"address": {
"type": "string",
"include_in_all": true,
"analyzer": "ik",
"term_vector": "with_positions_offsets"
},
"time": {
"type": "long"
}
}
}
}

POST /useraudit/t_participle_index_test/_mapping
{
"t_participle_index_test": {
"properties": {
"uid": {
"type": "long",
"index": "not_analyzed"
},
"country": {
"type": "string",
"index": "not_analyzed"
},
"city": {
"type": "string",
"index": "not_analyzed"
},
"area": {
"type": "string",
"index": "not_analyzed"
},
"address": {
"type": "string",
"include_in_all": true,
"analyzer": "ik",
"term_vector": "with_positions_offsets"
},
"time": {
"type": "long",
"index": "not_analyzed"
}
}
}
}

PUT /useraudit/t_unparticiple_test/1
{
"uid": 200111,
"country": "四川省",
"city":"眉山市",
"area":"东坡区",
"time": 1441293300,
"address": "红星东路二段139号"
}

PUT /useraudit/t_unparticiple_test/6
{
"uid": 200111,
"country": "四川省",
"city":"眉山市",
"area":"东坡区",
"time": 1441293300,
"address": "东坡胡公园"
}


PUT /useraudit/t_unparticiple_test/2
{
"uid": 200115,
"country": "四川省",
"city":"眉山市",
"area":"东坡区",
"time": 1441293300,
"address": "红星东路西三段123号冒菜店"
}

PUT /useraudit/t_unparticiple_test/3
{
"uid": 362201,
"country": "浙江省",
"city":"杭州市",
"area":"萧山区",
"time": 1441293300,
"address": "宁围镇二桥村顺发康庄4栋1单元902"
}

PUT /useraudit/t_unparticiple_test/4
{
"uid": 362203,
"country": "浙江省",
"city":"衢州市",
"area":"常山县",
"time": 1441293300,
"address": "新都工业区文东路852号天幕家纺"
}

PUT /useraudit/t_unparticiple_test/5
{
"uid": 662203,
"country": "浙江省",
"city":"衢州市",
"area":"常山县",
"time": 1441293300,
"address": "低塘街道新堰西路45号"
}

PUT /useraudit/t_participle_test/1
{
"uid": 200111,
"country": "四川省",
"city":"眉山市",
"area":"东坡区",
"time": 1441293300,
"address": "红星东路二段139号"
}

PUT /useraudit/t_participle_test/2
{
"uid": 200115,
"country": "四川省",
"city":"眉山市",
"area":"东坡区",
"time": 1441293300,
"address": "红星东路西三段123号冒菜店"
}

PUT /useraudit/t_participle_test/3
{
"uid": 362201,
"country": "浙江省",
"city":"杭州市",
"area":"萧山区",
"time": 1441293300,
"address": "宁围镇二桥村顺发康庄4栋1单元902"
}

PUT /useraudit/t_participle_test/4
{
"uid": 362203,
"country": "浙江省",
"city":"衢州市",
"area":"常山县",
"time": 1441293300,
"address": "新都工业区文东路852号天幕家纺"
}

PUT /useraudit/t_participle_test/5
{
"uid": 662203,
"country": "浙江省",
"city":"衢州市",
"area":"常山县",
"time": 1441293300,
"address": "低塘街道新堰西路45号"
}


PUT /useraudit/t_participle_index_test/1
{
"uid": 200111,
"country": "四川省",
"city":"眉山市",
"area":"东坡区",
"time": 1441293300,
"address": "红星东路二段139号"
}

PUT /useraudit/t_participle_index_test/2
{
"uid": 200115,
"country": "四川省",
"city":"眉山市",
"area":"东坡区",
"time": 1441293300,
"address": "红星东路西三段123号冒菜店"
}

PUT /useraudit/t_participle_index_test/3
{
"uid": 362201,
"country": "浙江省",
"city":"杭州市",
"area":"萧山区",
"time": 1441293300,
"address": "宁围镇二桥村顺发康庄4栋1单元902"
}

PUT /useraudit/t_participle_index_test/4
{
"uid": 362203,
"country": "浙江省",
"city":"衢州市",
"area":"常山县",
"time": 1441293300,
"address": "新都工业区文东路852号天幕家纺"
}

PUT /useraudit/t_participle_index_test/5
{
"uid": 662203,
"country": "浙江省",
"city":"衢州市",
"area":"常山县",
"time": 1441293300,
"address": "低塘街道新堰西路45号"
}


#精确查询
GET /useraudit/t_unparticiple_test/_search?q=uid:200111
GET /useraudit/t_unparticiple_test/_search
{
"query": {
"match": {
"uid": "200111"
}
}
}

# 字段为strin类型,mappin中未定义取消分词,精确查询不到数据
GET /useraudit/t_unparticiple_test/_search
{
"query": {
"match": {
"city": "衢州市"
}
}
}

GET /useraudit/t_participle_test/_search
{
"query": {
"match": {
"country": "四川省"
}
}
}

# 字段为strin类型,mappin中定义取消分词,精确查询数据
GET /useraudit/t_participle_index_test/_search
{
"query": {
"match": {
"country": "四川省"
}
}
}


#模糊查询
GET /useraudit/t_participle_test/_search
{
"query" : { "term" : { "address" : "红星" }},
"highlight" : {
"pre_tags" : ["<tag1>", "<tag2>"],
"post_tags" : ["</tag1>", "</tag2>"],
"fields" : {
"address" : {}
}
}
}
GET /useraudit/t_participle_index_test/_search
{
"query" : { "term" : { "address" : "红星" }},
"highlight" : {
"pre_tags" : ["<tag1>", "<tag2>"],
"post_tags" : ["</tag1>", "</tag2>"],
"fields" : {
"address" : {}
}
}
}

POST /index/fulltext/_search
{
"query" : { "term" : { "content" : "中国" }},
"highlight" : {
"pre_tags" : ["<tag1>", "<tag2>"],
"post_tags" : ["</tag1>", "</tag2>"],
"fields" : {
"content" : {}
}
}
}

二, java客户端调用Elasticsearch集群
1, 精准查询
2, 模糊查询(使用分词) 

public class ESQueryClient {
    static Client CLIENT = null;
    static {
        // on startup
        Settings settings = ImmutableSettings.settingsBuilder().put("cluster.name", "elasticsearch_useraudit").put("client.transport.sniff", true)
                .build();
        CLIENT = new TransportClient(settings).addTransportAddress(new InetSocketTransportAddress("127.0.0.1", 9301))
                .addTransportAddress(new InetSocketTransportAddress("127.0.0.1", 9302))
                .addTransportAddress(new InetSocketTransportAddress("127.0.0.1", 9303));
    }

    public static void main(String[] args) throws ElasticsearchException, IOException {
        // 通过id查询
        qryById();
        // 通过某个字段查询,例如uid, country
        SearchRequestBuilder builder = CLIENT.prepareSearch("useraudit").setTypes("t_participle_test").setSearchType(SearchType.DEFAULT)
                .setFrom(0).setSize(100);
        BoolQueryBuilder qb = QueryBuilders.boolQuery().must(new QueryStringQueryBuilder("眉山市").field("city"));
        builder.setQuery(qb);
        SearchResponse response = builder.execute().actionGet();
        System.out.println("字段为strin类型, mappin中未定义取消分词,精确查询不到数据, 测试结果:");
        System.out.println("通过city字段查询:" + response);
        System.out.println("通过city字段查询信息数量:" + response.getHits().getTotalHits());

        // 通过某个字段查询,例如uid, country
        builder = CLIENT.prepareSearch("useraudit").setTypes("t_participle_index_test").setSearchType(SearchType.DEFAULT).setFrom(0).setSize(100);
        qb = QueryBuilders.boolQuery().must(new QueryStringQueryBuilder("眉山市").field("city"));
        builder.setQuery(qb);
        response = builder.execute().actionGet();
        System.out.println("字段为strin类型, mappin中定义取消分词,精确查询数据 , 测试结果:");
        System.out.println("通过city字段查询:" + response);
        System.out.println("通过city字段查询信息数量:" + response.getHits().getTotalHits());

        // .should(new QueryStringQueryBuilder("太多").field("city"))
        CLIENT.close();
    }

    private static void qryById() {
        GetResponse response = CLIENT.prepareGet("useraudit", "t_participle_test", "1").setOperationThreaded(false).execute().actionGet();
        System.out.println("通过id查询:" + response.getSourceAsString());
    }
}

三, 索引数据的维护
四, 批量插入数据
测试数据量5千万
五, 压力测试并发精准查询和模糊查询
iteye_6322
关注
专栏目录
ElasticSearch 模糊查询-脚本
酆都城博客
08-28 238
ElasticSearch 模糊查询-脚本 模糊查询-脚本 的三种方法 wildcard查询:会对查询条件进行分词。还可以使用通配符? (任意单个字符)和* (0个或多个字符) regexp查询?正则查询 prefix查询:前缀查询 wildcard查询 wildcard查询：会对查询条件进行分词。还可以使用通配符 ?（任意单个字符） 和 * （0个或多个字符） "*华*" 包含华字的 "华*" 华字后边多个字符 "华?" 华字后边多个字符 "*华"或"?华" 会引发全表（全索引）扫描 注意效率问
Python ElasticSearch一站式教程(高级操作篇）
feizuiku0116的博客
01-13 8552
不懂基础的可以查看>>>>Python ElasticSearch一站式教程（基础篇） 一、函数介绍 es.search()：按照指定规则查询 index：要查询数据的索引 size：查询所少条数据 from_：从指定索引开始查询 filter_path：添加过滤路径，显示指定字段(默认显示所有字段信息) query：要查询数据的规则 query={‘match_all’:{}}：查询所有语句 query={‘match’:{‘name’:‘杨晨’}}：检索指定字段 match
ES普通用法（模糊查询、高亮、分类、排序、批量添加）
最新发布
yydslh的博客
08-13 935
仅个人笔记！提示：以下是本篇文章正文内容，下面案例可供参考。
字段long型的模糊查询
ssyan的专栏
01-21 4452
字段为varchar,也就是string的模糊查询方法如下：String work = wsform.getWork();detachedCriteria.add(Restrictions.like("work",work,MatchMode.ANYWHERE));而long 型的需要用下面这种方法:detachedCriteria.add(Restrictions.sqlRestriction("{alias}.WORK LIKE (?)","%"+work +"%",Hibernate.STRING))
elasticsearch 进行模糊查询时，不同方式的差异性
老头的博客
05-24 982
众所周知，目前使用elasticsearch进行模糊搜索时，主要有2种方式 第一种：使用wildcard 关键字 + 未分词的字段进行搜索 第二种：使用match_phrase + 分词的方式进行搜索 对于这两种搜索，效率和性能上有什么区别呢？我们通过jmeter来压测下性能。 测试的服务器指标： 1C 2G 1、创建es的index 自定义一个分词器（分词器将一个文本分割成单个字符），并且一个字段（address）使用自定义分词器分词，一个字段（addressNoAnalysis）不分词，分词的字段用来校
elasticsearch查询操作（语句方式）_es模糊查询语句，2024年最新全网首发
2401_84159966的博客
04-13 851
加权模式，即最终分值 = 查询分值?“location”:“纬度,经度”GET /索引库名/_search。GET /索引库名/_search。# 文档中位置相关的字段名、字段值。GET /索引库名/_search。GET /索引库名/_search。GET /索引库名/_search。“distance”:“距离”,“from”: 起始位置,# 必须不能匹配的子查询。# 必须匹配的子查询。# 可以匹配的子查询。# 必须匹配的子查询。“lat”: 纬度,“size”: 条数。
Python Elasticsearch DSL 查询、过滤、聚合操作实例
2401_84010762的博客
04-20 687
Python Elasticsearch DSL 使用简介连接 Es：import elasticsearches = elasticsearch.Elasticsearch([{‘host’: ‘127.0.0.1’, ‘port’: 9200}])先看一下搜索， 是指搜索内容，空格对 查询结果没有影响， 指定个数， 指定起始位置， 可以指定需要显示的数据，如本例中显示在最后的结果中的只有 和 。res_3 = es.search(index=“bank”, q=“Holmes”, size=1, f
分布式全文检索引擎ElasticSearch原理及使用实例
12-16
**Elasticsearch 概述** Elasticsearch 是一个强大的、分布式的实时搜索和分析引擎，其设计...8. **Java 如何使用 Elasticsearch 进行模糊查询** 这些文章将帮助读者深入理解 Elasticsearch 的使用，并提供实践指导。
ElasticSearch官方测试数据
09-14
Elasticsearch（ES）是一种流行的开源全文搜索引擎，它基于Lucene库构建，被广泛用于大数据分析、日志聚合、实时搜索和索引等场景。官方提供的测试数据集是检验Elasticsearch功能、性能和稳定性的关键资源，可以帮助...
ElasticSearch查询方法详解与实例
ElasticSearch 查询语句是Elasticsearch搜索引擎中的核心功能，它提供了丰富的搜索语法和条件，帮助用户在大型索引中高效地查找、筛选和排序数据。本文档概述了几个关键的查询类型和语法，包括： 1. **匹配所有查询...
【Elasticsearch】索引和查询性能调优的21条建议-以及调优参数
九师兄
10-09 3110
转载：https://www.cnblogs.com/sanduzxcvbnm/p/12624662.html 1.Elasticsearch部署建议 1.1. 选择合理的硬件配置：尽可能使用 SSD Elasticsearch 最大的瓶颈往往是磁盘读写性能，尤其是随机读取性能。使用SSD（PCI-E接口SSD卡/SATA接口SSD盘）通常比机械硬盘（SATA盘/SAS盘）查询速度快5~10倍，写入性能提升不明显。 对于文档检索类查询性能要求较高的场景，建议考虑 SSD 作为存储，同时按照 1:10 的比.
es 插件 求汉明距离
xuejidong的专栏
05-19 1055
/* * To change this license header, choose License Headers in Project Properties. * To change this template file, choose Tools | Templates * and open the template in the editor. */ package org.diexun.plugin; import java.io.IOException; import java.uti
ElasticSearch学习-p1
JerryM的博客
12-21 2070
ES 一、概念 ElasticSearch:是一个分布式、可扩展、实时的搜索与数据分析引擎。它是全文检索、结构化搜索、分析以及这三个功能的组合。 二、elasticSearch与mysql的差异 1.mysql和elasticSearch都能实现对数据的分析与搜索，但是mysql偏向于持久化的存储与管理，如果使用mysql来进行海量数据的分析和搜索，mysql并不能像es那样提供秒级的搜索速度。 2.mysql单表存储的数据很大，用来做检索和查询会比较慢，会比较浪费性能，同时使用mysql对多个不同的关键字
ElasticSearch~查询操作~(简单查询、批量查询、匹配查询、模糊查询、精确查询、范围查询、通配符查询、must查询、should查询、过滤查询）
feizuiku0116的博客
02-25 5293
一、简单查询 一、查询所有结果 GET /student_info/_search { "query": {"match_all": {}} } 二、根据条件查询 GET /student_info/_search { "query":{ "match":{ "name":"张三" } } } 三、排序 GET /student_info/_search { "query":{ "match":{ "name":"张三" } }
Elasticsearch如何让一个字段同时支持精确匹配和模糊检索
和光同尘的博客
07-04 2万+
需求：如何让ES的某个字段既能支持精确匹配查找，也能支持模糊检索？ 方法：将字段的mapping设置为如下这种即可： "properties": { "name": { "type": "text", "fields": { "ke...
ElasticSearch 模糊匹配查询
热门推荐
hemuxiao的专栏
06-05 4万+
目前的需求输入：王? 女 济南 20-30 能够查询以王开头的人的名字 性别为女性 地址为济南 *年龄为20-30 分析及查询 针对姓名，可直接在规范中定义好，王？ 王* 王？？，可直接搜索是否存在字符串； 针对性别，因只有男女，可直接进行匹配 地址为汉字，可作为if条件最后的一节，放到查询语句中； 年龄需要进行判断，存在数字的，或者存在“-”符号的，要进行日期加减，找出1
ElasticSearch 模糊查询
一只呆毛的专栏
09-29 2万+
背景：当要查询的字符串与分词的字段不一致时。由于ES根据词典进行分词，而输入的查询字符串又是比较随意的，比如名称。于是需要用到模糊查询 ES：版本5.x 解决方案： 利用 wildcard 注意需要将该字段不分词 POST /indexname/typename/_search { "query": { "wildcard": { "fieldname": { ...
Elasticsearch 权威教程 - 模糊匹配
uxff的专栏
03-01 3454
模糊匹配 一般的全文检索方式使用 TF/IDF 处理文本或者文本数据中的某个字段内容。将字面切分成很多字、词(word)建立索引，match查询用query中的term来匹配索引中的字、词。match查询提供了文档数据中是否包含我们需要的query中的单、词，但仅仅这样是不够的，它无法提供文本中的字词之间的关系。 举个例子： 小苏吃了鳄鱼 鳄鱼吃了小苏 小苏去哪儿都带着的鳄...
java中使用elasticsearch进行简单的搜索
ROAOR1的博客
03-08 1万+
最近突然想写博客了，但是elasticsearch已经装好，我装在本地虚拟机上，这里就先不说elasticsearch的安装了，以后有机会再写一篇博客，这里仅仅使用es进行简单的搜索。 有一段时间没启动elasticsearch了，启动报错，显示没有文件权限，后来发现logs目录下有root用户的文件。 修改文件所有者： 这里我们直接修改logs文件夹的权限，这里要切换回root用户修改。 ...
elastic search的模糊查询
09-26
总而言之，Elasticsearch的模糊查询功能可以通过通配符查询和模糊查询语法来实现，可以根据具体的需求选择合适的方式进行查询。模糊查询是搜索引擎中常用的一种查询方式，可以帮助用户找到包含部分关键词的相关文档...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值