Python Elasticsearch DSL 查询、过滤、聚合操作

Python操作Elasticsearch DSL详解
最新推荐文章于 2024-03-27 01:59:00 发布
原创 最新推荐文章于 2024-03-27 01:59:00 发布 · 684 阅读 · 0 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#elasticsearch #python #数据库

本文介绍了Elasticsearch的基本概念，包括Index、Document、Document Type和Mapping，并详细讲解了使用Python Elasticsearch DSL进行搜索、过滤和聚合操作的方法，如指定索引查询、多字段查询、范围过滤以及排序和分页等。

Elasticsearch 基本概念

Index：Elasticsearch用来存储数据的逻辑区域，它类似于关系型数据库中的database 概念。一个index可以在一个或者多个shard上面，同时一个shard也可能会有多个replicas。

Document：Elasticsearch里面存储的实体数据，类似于关系数据中一个table里面的一行数据。

document由多个field组成，不同的document里面同名的field一定具有相同的类型。document里面field可以重复出现，也就是一个field会有多个值，即multivalued。

Document type：为了查询需要，一个index可能会有多种document，也就是document type. 它类似于关系型数据库中的 table 概念。但需要注意，不同document里面同名的field一定要是相同类型的。

Mapping：它类似于关系型数据库中的 schema 定义概念。存储field的相关映射信息，不同document type会有不同的mapping。

下图是ElasticSearch和关系型数据库的一些术语比较：

Relationnal database Elasticsearch
Database Index
Table Type
Row Document
Column Field
Schema Mapping
Schema Mapping
Index Everything is indexed
SQL Query DSL
SELECT * FROM table… GET http://…
UPDATE table SET PUT http://…

Python Elasticsearch DSL 使用简介

连接 Es：


                

        

    

    
  


        

            

                      
                        最低0.47元/天 解锁文章
                          
                      
            

        


    



                



	

		

			

				
					
ElasticSearch - DSL查询文档语法，以及深度分页问题、解决方案

				
			

			

				

					CYK_byte的博客
				

				

					09-26
					
					3433
					
				

			

		

		

			
				
你在淘宝里买东西的时候，要通过一些信息进行筛选，比如 销量、信誉、价格升序... 这些词一般都是固定一个按钮，点击就会帮你做筛选.

			
		

	



                

            
              



	

		

			

				
					
Python Elasticsearch DSL 查询、过滤、聚合操作实例

					
最新发布

				
			

			

				

					2401_84010762的博客
				

				

					04-20
					
					875
					
				

			

		

		

			
				
Python Elasticsearch DSL 使用简介连接 Es：import elasticsearches = elasticsearch.Elasticsearch([{‘host’: ‘127.0.0.1’, ‘port’: 9200}])先看一下搜索， 是指搜索内容，空格对  查询结果没有影响， 指定个数， 指定起始位置， 可以指定需要显示的数据，如本例中显示在最后的结果中的只有  和 。res_3 = es.search(index=“bank”, q=“Holmes”, size=1, f

			
		

	



              


  
              

                


	

		

			

				
					
Python-ElasticSearch搜索

				
			

			

				

					奔跑的豆子的专栏
				

				

					08-03
					
					2万+
					
				

			

		

		

			
				
Elasticsearch 是一个开源的搜索引擎，建立在一个全文搜索引擎库 Apache Lucene™ 基础之上。 Lucene 可能是目前存在的，不论开源还是私有的，拥有最先进，高性能和全功能搜索引擎功能的库。但是 Lucene 仅仅只是一个库。为了利用它，你需要编写 Java 程序，并在你的 java 程序里面直接集成 Lucene 包。 更坏的情况是，你需要对信息检索有一定程度的理解才能明白

			
		

	





	

		

			

				
					
ElasticSearch查询DSL：从基础到高级应用

				
			

			

				

					silenceallat的博客
				

				

					03-27
					
					1072
					
				

			

		

		

			
				
本文深入讲解了ElasticSearch查询DSL（Domain Specific Language）的使用，涵盖了基本概念、高级查询技巧、最佳实践和实际案例分析。文章强调了ElasticSearch作为一个强大搜索工具的潜力，并提醒读者通过不断实践和学习，才能充分发挥其功能。

			
		

	



		

			
		



	

		

			

				
					
python elasticsearch dsl_Python Elasticsearch DSL 查询

				
			

			

				

					weixin_33554514的博客
				

				

					02-19
					
					438
					
				

			

		

		

			
				
Python Elasticsearch DSL 使用简介连接 Es：import elasticsearchclinet = elasticsearch.Elasticsearch([{"host": "10.44.99.102", "port": 9200}])orclinet = Elasticsearch(["10.44.99.102:9200"])先看一下搜索，q 是指搜索内容，空格对 ...

			
		

	





	

		

			

				
					
python操作elasticsearch

				
			

			

				

					Python热爱者的博客
				

				

					11-09
					
					2866
					
				

			

		

		

			
				
一、基本查询
from elasticsearch import Elasticsearch

# 建立连接
es = Elasticsearch( 
    hosts={'192.168.0.120', '192.168.0.153'},  # 地址
    timeout=3600  # 超时时间
)


es.search(index='pv23')  # index：选择数据库

此方法是默认查询，由于没有任何筛选条件，会默认显示前10条数据的所有信息
二、filter_path
添加过滤路径。通

			
		

	





	

		

			

				
					
Elasticsearch：使用 Python elasticsearch-dsl-py 库对 Elasticsearch 进行查询

				
			

			

				

					Elastic 中国社区官方博客
				

				

					08-31
					
					2906
					
				

			

		

		

			
				
在我之前的几篇文章中：


	Elasticsearch：Elasticsearch 开发入门 - Python
	
	
	Elasticsearch：运用 Python 来实现对搜索结果的分页
	
	
	Elasticsearch：从零开始安装 Elasticsearch 并使用 Python 装载一个 CSV 并读写它
	
我详细地描述了如何使用 elasticsearch-py 这个库来对 Elasticsearch 进行访问。 elasticsearch-py 库是一个官方发布的低级客户端库。它其实

			
		

	





	

		

			

				
					
使用python查询Elasticsearch并导出所有数据

					
热门推荐

				
			

			

				

					fwj_ntu的博客
				

				

					02-21
					
					3万+
					
				

			

		

		

			
				
作为数据分析师，要学的可真多！但一旦触及到数据，无论它在藏在哪里，只要我们想要使用，就真是无所不用其极阿，python刀操起来~
刚开始一直通过Kibana提供的工具来查询存储在Elasticsearch中的数据，统计个结果完全没问题。偶一日不仅仅是需要查询统计个结果，而是要对满足条件的结果近一步分析，此时发现手头的Kibana有点囧…
我神气的python出场啦
为了实现自己的需求，搬了会砖，又...

			
		

	





	

		

			

				
					
【ElasticSearch笔记】使用Python生成ES DSL语句

				
			

			

				

					木子家有小可爱的博客
				

				

					01-22
					
					1426
					
				

			

		

		

			
				
将传统的JSON DSL语句，映射为Python类、对象操作，使其两者相互转换互通，减少手动编写JSON DSL语句的繁琐，提高可维护性。

			
		

	





	

		

			

				
					
Python-elasticsearchdslpyElasticsearch的官方高级Python客户端

				
			

			

				

					08-11
				

			

		

		

			
				
elasticsearch-dsl-py：Elasticsearch 的官方高级 Python 客户端

			
		

	





	

		

			

				
					
python elasticsearch dsl_学习python库：elasticsearch-dsl

				
			

			

				

					weixin_39572442的博客
				

				

					12-09
					
					694
					
				

			

		

		

			
				
一、简介elasticsearch-dsl是基于elasticsearch-py封装实现的，提供了更简便的操作elasticsearch的方法。二、具体使用elasticsearch的官方文档介绍一共包括六个部分，分别是：configuration、search dsl、persistence、update by query、API document。2.1 Configuration有许多方式可...

			
		

	





	

		

			

				
					
python elasticsearch dsl_使用python聚合elasticsearch-dsl中的字段

				
			

			

				

					weixin_39628498的博客
				

				

					12-09
					
					238
					
				

			

		

		

			
				
小编典典首先。现在我注意到，我在这里写的内容实际上没有定义聚合。对我来说，有关如何使用它的文档不是很可读。使用我上面写的内容，我将进行扩展。我正在更改索引名称以使其成为一个更好的示例。from datetime import datetimefrom elasticsearch_dsl import DocType, String, Date, Integerfrom elasticsearch_...

			
		

	





	

		

			

				
					
python Elasticsearch查询

				
			

			

				

					u011613991的专栏
				

				

					11-18
					
					530
					
				

			

		

		

			
				
1. scroll 分页查询-方式1



def search(kid,did):
    alldata=[]
    t1=time.time()*1000
    es = Elasticsearch([{'host': '*.*.*.*', 'port': 9200}])
    body={
    "_source": ["uid", "knowledge_ids"],
    "q...

			
		

	





	

		

			

				
					
python中elasticsearch_dsl模块用法详解

				
			

			

				

					m0_72557783的博客
				

				

					09-20
					
					2021
					
				

			

		

		

			
				
elasticsearch-dsl是基于elasticsearch-py封装实现的，提供了更简便的操作elasticsearch的方法。

			
		

	





	

		

			

				
					
Python操作Elasticsearch

				
			

			

				

					全国10大躺平艺术家之一，世界10大懒人之二，宇宙百百万亿尘埃之一
				

				

					03-15
					
					1万+
					
				

			

		

		

			
				
描述：ElasticSearch是一个基于Lucene的搜索服务器。它提供了一个分布式多用户能力的全文搜索引擎，基于RESTful web接口。下面介绍了利用Python API接口进行数据查询，方便其他系统的调用。注：此文仅做笔记参考  安装API1pip install elasticsearch 建立es连接12from elasticsearch import Elasticsearche...

			
		

	





	

		

			

				
					
Python-ElasticSearch客户端的封装（聚合查询、统计查询、全量数据）

				
			

			

				

					关注网络安全、云原生安全
				

				

					07-30
					
					1786
					
				

			

		

		

			
				
官方提供了两个客户端elasticsearch、elasticsearch-dsl第二个是对第一个的封装，类似ORM操作数据库，可以.filter、.groupby，个人感觉很鸡肋，star数也不多。平时使用的时候一般会在kibana上测试，然后直接把query拷贝过来获取更多数据，所以这里做下第一个的封装。

			
		

	





	

		

			

				
					
python elasticsearch 入门教程(四)分析聚合

				
			

			

				

					luoganttcc的博客
				

				

					08-07
					
					1780
					
				

			

		

		

			
				
from datetime import datetime
from elasticsearch import Elasticsearch
es = Elasticsearch()

doc = {
    'author': 'kimchy',
    'text': 'Elasticsearch: cool. bonsai cool.',
    'timestamp': datetime.n...

			
		

	





	

		

			

				
					
ElasticSearch查询方法（python）

				
			

			

				

					任昌伟
				

				

					02-25
					
					2384
					
				

			

		

		

			
				
Find all
es.search(index="my_index",doc_type="test_type")
 
# 或者

body = {
    "query":{
        "match_all":{}
    }
}
es.search(index="my_index",doc_type="test_type",body=body)

term And terms
#

			
		

	





	

		

			

				
					
Python中Elasticsearch DSL复杂查询优化进阶指南

				
			

			

				

					
				

			

		

		

			
				
第二章是对Elasticsearch及DSL的简要回顾，涵盖安装配置、简单查询与聚合操作，为后续进阶内容打下基础；第三章则是全文重点所在，详细展开在Python环境下构建复杂查询的各种模式：  首先是**多条件组合查询**，通过...

			
		

	



              




          




        



    





    



      

      

        
      

      





	

		评论	
	

  
	




  

    

      添加红包
      
    

    

      

        
        

          
          
        

        
请填写红包祝福语或标题

      

      

        
        

          
          个
        

        
红包个数最小为10个

      

      

        
        

          
          元
        

        
红包金额最低5元

      

      

        
        

          当前余额3.43元
          前往充值 >
        

      

      

        

          需支付：10.00元
        

        
        
      

    

  





  

    
    
  

  

    
    
  








  

    

      

        

          

            
            
成就一亿技术人!

          

          

        

        

          

          

            领取后你会自动成为博主和红包主的粉丝
            规则
          

        

      

      

        

          

            
              
            
            

              
hope_wisdom
 发出的红包
            

          

        

        

          

          

          

        

      

    

    

  



      
      

      
实付元

      
使用余额支付

      

        

          

            
            点击重新获取
          

        

        
扫码支付

      

      

        
          
            
          
          
        
      

      

        
        钱包余额
          0
          

            
            

              

                
抵扣说明：

                
 1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
 2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

              

            

          

      

      余额充值