Elastic 中国社区官方博客

关于 Elastic Stack 及相关的任何技术

  • 博客(23)
  • 资源 (9)
  • 收藏
  • 关注
全部文章> 2019年12月
排序：
按最后发布时间
按访问量
RSS订阅
12月 11月 10月 09月 08月 04月 03月 02月 01月

原创 Logstash: 启动监控及集中管理

在本篇文章里，我将详细介绍如果启动Logstash的监控及集中管理。前提条件如果你还没安装好自己的Logstash，请参照文章“如何安装Elastic栈中的Logstash”。同时安装我之前的文章“Elasticsearch：设置Elastic账户安全”为我们的Elasticsearch及Kibana设置安全密码。如何监控Logstash?我们安装如下的步骤来实现监控L...

2019-12-31 10:48:53 9948 32

原创 Elasticsearch：flattened 数据类型 （7.3 发行版新功能）

默认情况下，对象中的每个子字段都需要分别进行映射和索引。如果事先不知道子字段的名称或类型，则将动态映射它们。flattened数据类型提供了一种替代方法，其中将整个对象映射为单个字段。对于给定的对象，flatten类型映射将解析出其leaf值并将它们作为关键字索引到一个字段中。然后可以通过简单的查询和汇总来搜索对象的内容。此数据类型对于索引具有大量或未知数量的唯一键的对象很有用。仅为整个J...

2019-12-26 14:18:32 4681 1

原创 Elasticsearch： range 数据类型及基于range的聚合 (7.4发行版新功能)

在Elasticsearch中有一种数据类型叫做range的数据类型。它目前支持的类型如下：integer_range 一个带符号的32位整数范围，最小值为，最大值为。 float_range 一系列单精度32位IEEE 754浮点值。 long_range 一系列带符号的64位整数，最小值为-2的63次方，最大值为2的63次方-1。 double_range .........

2019-12-25 20:17:47 4187 2

原创 Elasticsearch：透彻理解 Elasticsearch 中的 Bucket aggregation

Elasticsearch除了在搜索方面非常之快，对数据分析也是非常重要的一面。正确理解Bucket aggregation对我们使用Kibana非常重要。Elasticsearch提供了非常多的aggregation可以供我们使用。其中Bucket aggregation对于初学者来说也是比较不容易理解的一个。在今天的这篇文章中，我来重点讲述这个。简单地说：一个桶代表一个具有共同标准的文档集...

2019-12-24 16:37:22 7704 5

原创 Elasticsearch: 运用 Pinned query 来提高文档的排名 （7.5发行版新功能）

Pinned 查询用来提升所选文档的排名，使其高于匹配给定查询的文档。 此功能通常用于引导搜索者查找精选的文档，这些文档在搜索的任何“organic”匹配项之上被提升。 使用存储在_id字段中的文档ID来标识升级或“固定”的文档。下面有给一个例子来说明：准备数据首先我们使用如下的bulk API接口来把我们所需要的数据导入到Elasticsearch之中：POST _b...

2019-12-23 16:11:43 2473 6

原创 Elasticsearch: Rare Terms Aggregation

在许多的情况下，我们做terms聚合搜索的时候，我们想得到的是每个桶里满足条件的文档最多的搜索结果。但是有些情况，我们想寻找稀有的术语数量。尽管我们可以把我们的搜索结果按照升序来排序，但是对于很大数据的这种聚合操作很容易造成unbunded error。在Elasticsearch了，Elastic提供了一种叫做Rare Terms Aggregation的方法。它使用了可预测结果的资源高...

2019-12-23 14:00:43 2302

原创 Elasticsearch：基于 Vector 的打分

目前这个功能还是处于试验阶段。在未来的版本中可能会出现变化。基于Vector（向量）的打分目前分为一下两种：Dense_vector Spare_vector它们都是基于功能进行评分的。在实际的使用中，我们必须注意的是：向量函数的计算过程中，所有匹配的文档均被线性扫描。 因此，期望查询时间随匹配文档的数量线性增长。 因此，我们建议使用查询参数限制匹配文档的数量。准备数据我们首...

2019-12-22 10:49:55 4105 6

原创 Elasticsearch：使用 function_score 及 script_score 定制搜索结果的分数

评分的概念是任何搜索引擎（包括 Elasticsearch）的核心。评分可以粗略地定义为：找到符合一组标准的数据并按相关性顺序将其返回。相关性通常是通过类似TF-IDF的算法来实现的，该算法试图找出文本上与提交的查询最相似的文档。尽管 TF-IDF 及其相近的算法（例如BM25）非常棒，但有时必须通过其他算法或通过其他评分启发式方法来解决相关性问题。在这里，Elasticsearch 的和功能变得非常有用。本文将介绍这些工具的用法。文本相似性不是最重要因素的一个域示例是地理搜索。

2019-12-21 16:59:49 10001 6

原创 Elasticsearch：Elasticsearch 中的 refresh 和 flush 操作指南

在今天的文章里，我们来主要介绍一下 Elasticsearch 的及两种操作的区别。如果我们从字面的意思上讲，好像都是刷新的意思。但是在 Elasticsearch 中，这两种操作是有非常大的区别的。本指南将有效解决两者之间的差异。我们还将介绍 Lucene 功能的基础知识，例如重新打开（reopen) 和提交 (commit)，这有助于理解 refresh 和 flush 操作。

2019-12-21 10:44:05 12043 17

原创 Elasticsearch：top_hits aggregation

top_hits指标聚合器跟踪要聚合的最相关文档。 该聚合器旨在用作子聚合器，以便可以按存储分区汇总最匹配的文档。top_hits聚合器可以有效地用于通过存储桶聚合器按某些字段对结果集进行分组。 一个或多个存储桶聚合器确定将结果集切成哪些属性。选项：from-要获取的第一个结果的偏移量。 size-每个存储桶要返回的最匹配匹配项的最大数目。 默认情况下，返回前三个匹配项。 排序-匹...

2019-12-19 21:20:39 3053 11

原创 Logstash：如何把 Elasticsearch 中的数据导出为 CSV 格式的文件

本教程向您展示如何将数据从Elasticsearch导出到CSV文件。 想象一下，您想要在Excel中打开一些Elasticsearch中的数据，并根据这些数据创建数据透视表。 这只是一个用例，其中将数据从Elasticsearch导出到CSV文件将很有用。方法一其实这种方法最简单了。我们可以直接使用Kibana中提供的功能实现这个需求。我们首先来准备数据：再接着选择...

2019-12-19 20:01:48 5000

原创 Elasticsearch：运用 distance feature 查询来增强相关性

提高文档的相关性得分，使其更接近提供的原始日期或地点。 例如，你可以使用此查询为更接近某个日期或位置的文档赋予更大的权重。你可以使用distance_feature查询查找与某个位置最近的邻居。 你还可以在布尔搜索的“should”过滤器中使用查询，以将增强的相关性得分添加到布尔查询的得分中。下面我们用一个具体的例子来展示这个API的使用。准备数据我们还是拿之前我们的文章“E...

2019-12-18 16:33:07 1978

原创 Elasticsearch: 运用 Field collapsing 来减少基于单个字段的搜索结果

允许根据字段值折叠搜索结果。 折叠是通过每个折叠键仅选择排序最靠前的文档来完成的。要想理解这个其实也并不难，我们就那百度音乐的页面例子来说：我们可以看到在上面的页面中，它有展示很多喜欢的歌曲。其实这个歌曲可能是一个专辑里的最突出的一个。当我们做页面的时候，我们没有必要把一个专辑里所有的歌曲都放到这个封面的位置。我也许就只想放这个专辑里点击率最高的或者是最受欢迎的一首歌作为这个专辑的代表。当...

2019-12-18 14:02:07 1667 1

原创 Beats：使用 Heartbeat 进行 Uptime 监控

Elastic在6.5的版本中退出Heartbeat。Heartbeat 也就是我们通常所说的心跳。我们知道在医院，医生是用听心跳来判断一个人是否有生命迹象。在Elastic的Heartbeat里，它也是一样的道理。Heartbeat是一个轻量级的数据收集器。它用来帮我们进行uptime的健康监控。它可以帮我们查看一个服务器及服务器中一些服务是否运行正常。心跳可以在网络内部或外部运...

2019-12-17 20:45:12 5084 12

原创 Elasticsearch：pipeline aggregation 介绍 （一）

首先，我们来假想有这样的一个表格：上面的表格里显示了每一个月的用户数量，但是我们如何能得到如下的信息呢：哪一个月的用户数是最大的？ 从April到January的总的用户数是多少？它们的平均用户数是多少？ 每个月变化的值是多少？所有的这些问题，我们都可以使用Pipeline aggregation来算出来，这是因为这些数据的统计需要用到它的parent或sibling............

2019-12-15 09:53:23 4023 5

原创 Elasticsearch：fielddata 介绍

默认情况下，大多数字段都已编入索引，这使它们可搜索。 但是，脚本中的排序，聚合和访问字段值需要与搜索不同的访问模式。搜索需要回答“哪个文档包含该术语？”这个问题，而排序和汇总则需要回答一个不同的问题：“此字段对该文档的值是什么？”。大多数字段可以将索引时生产的磁盘doc_values用于此数据访问模式，但是文本（text）字段不支持doc_values。替代的方案，文本（text）字段...

2019-12-14 14:47:14 3650 4

原创 Elasticsearch：从零开始安装 Elasticsearch 并使用 Python 装载一个 CSV 并读写它

本文提供了一个简短的简单指南，介绍如何设置您的第一个Elasticsearch开发环境，以便快速进行并开始探索/利用技术提供的功能。简介将基于Elasticsearch提供的最重要的API，这些API是获取数据和执行查询的基础。第二个目的是提供文档和其他有趣资源的链接，以了解其他潜在的操作方面，其他出色的功能和各种工具。目标受众可以是个人数据分析师或Web开发人员，具有相关数据用例且已经听说...

2019-12-13 20:57:58 3035 2

原创 X-Pack：Elastic Graph 介绍

当我刚接触Elastic的Graph时，我对Graph的理解确实是模糊的。从字面上讲，它的意思是“图形”的意思。那个它在Elasticsearch中到底代表是什么？经过一段时间的探索，我对这个Graph有一些初步的认识。简单地说：graph代表的是数据之间的关联。这个数据可以是同一个索引或者是多个索引的。在今天的文章中，我来介绍一下graph到底是什么。图形分析功能使您可以发现Elastics...

2019-12-13 15:49:52 2566

原创 Elasticsearch：hanlp 中文分词器

HanLP 中文分词器是一个开源的分词器，是专为Elasticsearch而设计的。它是基于HanLP，并提供了HanLP中大部分的分词方式。它的源码位于：https://github.com/KennFalcon/elasticsearch-analysis-hanl从Elasticsearch 5.2.2开始，一直有跟随Elasticsearch的不同发行版而更新。安装1...

2019-12-06 14:36:46 6005 3

原创 Elasticsearch：enrich processor （7.5发行版新功能）

我们使用enrich processor来简化数据的摄取。简单地说：您可以使用enrich processor在ingest期间将现有索引中的数据添加到传入文档中。比如，你可以在如下的场景中用到：根据已知的IP地址识别Web服务或供应商 根据产品ID将产品信息添加到零售订单 根据电子邮件地址补充联系信息 根据用户坐标添加邮政编码在我之前的一篇文章“Logstash：运用jdbc_str...

2019-12-05 16:25:24 2855 7

转载 Elastic：Elastic Stack 7.5.0 重磅发布

我们非常兴奋地宣布 Elastic Stack 7.5 正式发布了。我们在此版本中推出了 Kibana Lens，用户通过 Lens 可以快速又直观地创建可视化视图。我们在这一版本中对 Observability 和 Security 解决方案进行了重大的改进，同时我们还将 Elastic Enterprise Search 加入到了 7.5 的版本中。请继续阅读本文，并了解这个版本的所有亮点...

2019-12-05 10:19:37 1474

原创 Elastic: 如何在阿里云上构建 Elasticsearch 集群

阿里云（https://www.alibabacloud.com/zh/product/elasticsearch）创立于2009年，是全球领先的云计算及人工智能科技公司，为200多个国家和地区的企业、开发者和政府机构提供服务。阿里云在全球18个地域开放了49个可用区，为全球数十亿用户提供可靠的计算支持。基于Elasticsearch及商业功能，阿里云Elasticsearch作为云服务，集成了E...

2019-12-02 20:26:44 2198

原创 Elastic：在 Elastic 云上3分钟部署 Elastic 集群

Elastic Cloud Elasticsearch Service使您可以快速启动Elasticsearch和Kibana集群，然后立即开始发送日志！ 首先，您需要登录到Elastic Cloud Elasticsearch Service。 单击此处打开主页。 然后，点击“没有帐户？立即注册”链接。 最后，在“企业电子邮件地址”字段中输入您的电子邮件，然后单击“Start free tria...

2019-12-02 12:22:46 2171

02- Elastic Meetup-如何系统化的备战 Elastic认证专家考试 - 铭毅天下 线上 20240918
​1.Elastic 认证专家考试介绍 ​2.考纲介绍 ​3.备战介绍

2024-09-18

01 - 一次生产集群 ES Watcher 失效的深度排查与分析 全过程剖析与解决方案 - 尚雷 线上 20240918
​1. ES watcher 知识介绍 ​2. 生产环境 watcher 失效问题排查及分析处理过程

2024-09-18

04-Elasticsearch 运维架构及核心业务场景介绍 - 魏一凡 南京 20240825
本次分享将深入解析如何利用 Elastic 技术构建高效、稳定的运维架构。详细介绍 Elastic 在核心业务以及核心场景中的应用案例，探讨运维过程中的关键技术挑战与创新解决方案。以及未来 ES 新特性的应用和落地规划。

2024-08-25

03-ES APM全观测实战 - 陈文磊 南京 20240825
1.ES APM 使用背景介绍 2.ES APM 功能使用介绍 3.ES APM 实战介绍

2024-08-25

02-ES在互联网公司中应用及优化过程 - 尚雷 南京 20240825
1.ES 架构介绍 2.ES 节点扩缩容 3.ES 的优化记录

2024-08-25

01- Elasticsearch 简单而高效的管道查询语言 - 刘晓国 南京 20240825
1，为什么需要向量搜索？ 2，向量相似度基本知识 3，使用向量搜索，RAG 结合大语言模型来避免 LLM 幻觉

2024-08-25

04-十倍性价比蜕变：腾讯云ES全新架构助力日志场景降本增效 - 陈曦 深圳 20240727
腾讯云 ES 全新技术栈：采用读写分离、存算分离和查询/IO 并行化等先进技术，广泛应用于日志场景，实现冷热数据一体化搜索及弹性伸缩能力。 2023年助力腾讯云 CLS 节省过亿元成本，助力外部客户如跨越、嘀嗒等，成本普遍降低30%～80%。

2024-07-27

03-未来运维之道- Elastic Al助手的高效运维与数据智能 - 李捷 深圳 20240727
1. Elastic AI 助手概述：定义与功能简介 2.Elastic AI 助手核心使用场景介绍 3.实战演示：Elastic AI 助手提升运维效率

2024-07-27

02-腾讯云 ES8 新一代高性能高精度 RAG 向量检索引擎 - 黄国航 深圳 20240727

腾讯云 ES 不仅提供了相对于传统向量数据库的更全面的 RAG 解决方案，同时在性能方面也有着独特的优势。 腾讯云 ES RAG 方案凭借紫霄 GPU 的强大性能和深度优化的自研内核，大幅提升了文本搜索与向量检索的效率和精度。

2024-07-27

01- Elasticsearch 简单而高效的管道查询语言 - 刘晓国 深圳 20240727
Elasticsearch 查询语言 (ES|QL) 提供了一种强大的方法来过滤、转换和分析存储在 Elasticsearch 中以及未来其他运行时中的数据。 它旨在易于最终用户、SRE 团队、应用程序开发人员和管理员学习和使用。用户可以编写 ES|QL 查询来查找特定事件、执行统计分析并生成可视化效果。 它支持广泛的命令和功能，使用户能够执行各种数据操作，例如过滤、聚合、时间序列分析等。 Elasticsearch 查询语言 (ES|QL) 使用 “管道”(|) 逐步操作和转换数据。 这种方法允许用户组合一系列操作，其中一个操作的输出成为下一个操作的输入，从而实现复杂的数据转换和分析。

2024-07-27

02-B站Elasticsearch平台实践 王星轶 线上 20240619
1.为什么我们需要 Elasticsearch 平台, 在面对公司众多业务线时, 我们为业务接入与迭代效率贡献了什么 2.降低成本&资源隔离, 如何利用 es on k8s 实现业务质量与成本的双重优化 3.站内搜索是如何影响用户体验的, 我们应该怎样去优化检索的召回率与精确率

2024-06-20

01-Elasticsearch 管道查询语 ESQL 刘晓国 线上 20240619
Elasticsearch 查询语言 (ES|QL) 提供了一种强大的方法来过滤、转换和分析存储在 Elasticsearch 中以及未来其他运行时中的数据。 它旨在易于最终用户、SRE 团队、应用程序开发人员和管理员学习和使用。用户可以编写 ES|QL 查询来查找特定事件、执行统计分析并生成可视化效果。 它支持广泛的命令和功能，使用户能够执行各种数据操作，例如过滤、聚合、时间序列分析等。 Elasticsearch 查询语言 (ES|QL) 使用 “管道”(|) 逐步操作和转换数据。 这种方法允许用户组合一系列操作，其中一个操作的输出成为下一个操作的输入，从而实现复杂的数据转换和分析。

2024-06-20

04-Elasticsearch Serverless 架构介绍及 DEMO 展示 - 徐胜 上海2025.5.25
介绍阿里云 Elasticsearch Serverless 架构及其优势，并以淘宝母婴订单数据为例，展示如何快速将数据从数据库实时同步至 ES Serverless 中，并通过 Kibana 展示订单大盘进行运营分析。

2024-05-28

03-Elasticsearch 插件扩展与应用融合 - 李猛 上海 2025.5.25
1. ES 插件概念与应用场景 2.ES 插件之常见的业务应用需求。 3.ES 插件探讨

2024-05-28

02-EElasticsearch 升级和双活架构实践 - 徐胜 上海 2025.5.25
主要是分享一下主站引擎从 ES6 升级到 ES8 以及 Elasticsearch 同城双活的架构落地经验。主要体现在三个方面： 第一，主要是 ES 集群从 ES6 升级到 ES8 的优化实践；第二，主要是 ES 同城双活架构案例；第三，总结效果。

2024-05-28

01-Elasticsearch 管道查询语 ESQL - 刘晓国 上海 2024.5.25
Elasticsearch 查询语言 (ES|QL) 提供了一种强大的方法来过滤、转换和分析存储在 Elasticsearch 中以及未来其他运行时中的数据。 它旨在易于最终用户、SRE 团队、应用程序开发人员和管理员学习和使用。用户可以编写 ES|QL 查询来查找特定事件、执行统计分析并生成可视化效果。 它支持广泛的命令和功能，使用户能够执行各种数据操作，例如过滤、聚合、时间序列分析等。 Elasticsearch 查询语言 (ES|QL) 使用 “管道”(|) 逐步操作和转换数据。 这种方法允许用户组合一系列操作，其中一个操作的输出成为下一个操作的输入，从而实现复杂的数据转换和分析。

2024-05-28

04 - Elasticsearch+Neo4j在档案领域的探索与实践 - 兰小伟 重庆 2024.4.27
​使用 Elasticsearch 结合 Neo4j 提供的图搜索能力，以处理具有复杂关系的文档数据，增强档案领域内文档检索能力。

2024-04-29

03 - 未来运维之道 - Elastic Al 助手的高效运维与数据智能 - 李捷 重庆 2024.4.27
1. Elastic AI 助手概述：定义与功能简介 2.Elastic AI 助手核心使用场景介绍 3.实战演示：Elastic AI 助手提升运维效率

2024-04-29

02 - 使用 Elasticsearch 和 Opentelemetry 在 Kubernetes 上打造现代化的可观测性平台
在当今的软件开发和运维领域，可观测性是构建稳健、可靠系统的关键。特别是在Kubernetes等复杂分布式系统中，有效地收集、存储和分析日志、指标和追踪数据变得至关重要。本次演讲将介绍如何结合Elasticsearch和OpenTelemetry技术，构建一个现代化的可观测性平台，以在Kubernetes环境中实现全面的监控、分析和故障排查能力。

2024-04-29

01 - Elasticsearch 简单而高效的管道查询语言 - 刘晓国 重庆 2024.4.27
Elasticsearch 查询语言 (ES|QL) 提供了一种强大的方法来过滤、转换和分析存储在 Elasticsearch 中以及未来其他运行时中的数据。 它旨在易于最终用户、SRE 团队、应用程序开发人员和管理员学习和使用。用户可以编写 ES|QL 查询来查找特定事件、执行统计分析并生成可视化效果。 它支持广泛的命令和功能，使用户能够执行各种数据操作，例如过滤、聚合、时间序列分析等。 Elasticsearch 查询语言 (ES|QL) 使用 “管道”(|) 逐步操作和转换数据。 这种方法允许用户组合一系列操作，其中一个操作的输出成为下一个操作的输入，从而实现复杂的数据转换和分析。

2024-04-29

05-ES 在绿盟企业安全平台的应用实践 - 陆攀 武汉 2024.03.30
1. 安全大数据分析典型场景，面临的挑战 2. ES 在绿盟安全平台的应用情况，优化之路

2024-04-01

04-小米在 Elasticsearch 服务成本治理的实践-周明裕 武汉 2024.03.30
1.小米 Elasticsearch 服务现状与用户场景 2.在数据分层、数据压缩、部署架构优化上的成本治理实践 3.基于成本数仓开展的数据治理实践

2024-04-01

03-AI Assistant - 李捷 武汉 2024.03.30
1. Elastic AI 助手概述：定义与功能简介 2.Elastic AI 助手核心使用场景介绍 3.实战演示：Elastic AI 助手提升运维效率

2024-04-01

02-腾讯云 ES 结合 AI 场景的实践与探索 - 刘忠奇 武汉 2024.03.30
1. 腾讯云 ES 结合 AI 实现混合搜索实战演练 2. AI 诊断专家的探索 (LLMOps) 3. 腾讯云 ES 8.11.3 版本 AI 能力解读

2024-04-01

01- Elasticsearch 简单而高效的管道查询语言 - 刘晓国 武汉 2024.03.30
Elasticsearch 查询语言 (ES|QL) 提供了一种强大的方法来过滤、转换和分析存储在 Elasticsearch 中以及未来其他运行时中的数据。 它旨在易于最终用户、SRE 团队、应用程序开发人员和管理员学习和使用。用户可以编写 ES|QL 查询来查找特定事件、执行统计分析并生成可视化效果。 它支持广泛的命令和功能，使用户能够执行各种数据操作，例如过滤、聚合、时间序列分析等。 Elasticsearch 查询语言 (ES|QL) 使用 “管道”(|) 逐步操作和转换数据。 这种方法允许用户组合一系列操作，其中一个操作的输出成为下一个操作的输入，从而实现复杂的数据转换和分析。

2024-04-01

04-阿里云 Elasticsearch Serverless 低成本弹性能力解读 杭州 1.6 2024
围绕阿里云 Elasitcsearch Serverless 在超低成本、秒级弹性扩缩、云上免运维、API 兼容等多个方面，提供全流程使用 Demo 演示，及底层产品和技术架构的实现解读。

2024-01-08

02-Elasticsearch 8.x 向量搜索使用详解 杭州 1.6 2024
介绍用 Elasticsearch8 进行向量搜索开发的详细细节，包括调用 embedding 模型进行向量化，向量搜索 API 使用，最佳实践，语义搜索，混合搜索等等内容。

2024-01-08

03-Elasticsearch大宽表应用案例实践探索 杭州 1.6 2024
关系型数据库中数据表的字段数量超过100个极为少见，在 Elasticsearch 中索引字段数量超过100个已是随处可见，当索引字段数量超过100个、1000个、10000个，Elasticsearch 带来了什么？

2024-01-08

01 - Elasticsearch 简单而高效的管道查询语言- ES QL 杭州 1.6 2024

Elasticsearch 查询语言 (ES|QL) 提供了一种强大的方法来过滤、转换和分析存储在 Elasticsearch 中以及未来其他运行时中的数据。 它旨在易于最终用户、SRE 团队、应用程序开发人员和管理员学习和使用。用户可以编写 ES|QL 查询来查找特定事件、执行统计分析并生成可视化效果。 它支持广泛的命令和功能，使用户能够执行各种数据操作，例如过滤、聚合、时间序列分析等。 Elasticsearch 查询语言 (ES|QL) 使用 “管道”(|) 逐步操作和转换数据。 这种方法允许用户组合一系列操作，其中一个操作的输出成为下一个操作的输入，从而实现复杂的数据转换和分析。

2024-01-08

02-微盟技术沙龙-ES在商品中台的落地 12.21 2023 online
Elasticsearch 在业务上，主要用于一些业务检索场景（商品检索、订单检索等），构建在 ES 搜索引擎之上。在微盟体系中，商品中台 ES 承载了日均亿级别的查询和高频写入。经历过线上的一些性能挑战之后，逐步的沉淀了一些经验和理论。 本主题主要通过以下三个方面，来和大家探讨下 ES 在一些业务场景中的实操： 一、 ES 在商品中台的使用场景&落地沉淀：业务场景、规模介绍，如何高效率地支撑多业务线的检索迭代需求。 二、ES 在业务场景中的使用建议：通过一些建模的方法论，如何在一个业务选型中，进行合适的 ES 建模，业务研发，需要关注哪些场景，该从什么角度去做一些评估和选择，如何有效的设置一些索引。 三、基于业务场景的 ES 性能优化：ES 在业务的调优以及如何做优化，解决潜在问题风险，支持高频次的吞吐和写入查询。 最后呢，通过这些年与 ES 的恩爱情仇，提供一些ES，顶层的一些思考与方法论，一起交流，可以更轻松的使用ES，解决业务问题，提供商业价值。

2023-12-22

01-微盟 Elasticsearch 运维实践
Elasticsearch 作为开源的搜索引擎，在数据检索、大数据、日志分析等领域都有较好的表现。在微盟的生产环境中 ES 被广泛使用。 1、Elasticsearch 使用建议：介绍在使用 Elasticsearch 进行数据搜索和分析时，应该遵循的一些规范和建议，包括 ES 架构的选择、索引结构的设计、查询语句的优化、写入优化等等，以提高 Elasticsearch 的性能、可靠性、安全性和可维护性。 2、Elasticsearch 监控体系：介绍如何基于 Prometheus 和 Grafana 搭建一套 Elasticsearch 的监控体系。无侵入兼容自建 ES 与云 ES，实现微盟整个 ES 监控体系的落地。 3、Elasticsearch字段类型推荐：介绍 Elasticsearch 支持的多种字段类型，根据查询场景的特点和需求，选择最合适的类型的原则和建议，包括keyword/text/wildcard/long 类型等，以及分词器、查询方式等相关使用方法的影响和调优。 4、Elasticsearch 日常问题：分享一些在使用 Elasticsearch 过程中遇到的问

2023-12-22

04-腾讯云ES在日志和搜索的场景化能力建设-腾讯云师文博-最终版 12.02 2023 Beijing
腾讯云ES在日志和搜索的场景化能力建设-腾讯云师文博

2023-12-03

03-Vega 或 Vega-Lite二次开发 Kibana 接口可视化 12.02 2023 Beijing
Vega 或 Vega-Lite二次开发 Kibana 接口可视化

2023-12-03

02-Elasticsearch 索引优化-小红书刘显鹏 12.02 2023 Beijing
Elasticsearch 索引优化

2023-12-03

01-ES-QL for Community - Chinese 12.03 2023 Beijing
详细描述 ES|QL 新的管道语言

2023-12-03

01-Elasticsearch Relevance Engine - meetup 11.16 2023
Elasticsearch Relevance Engine 是一种创建高度相关的 AI 搜索应用程序的新功能。ESRE 建立在 Elastic 在搜索领域的领导地位以及超过两年的机器学习研究和开发基础之上。Elasticsearch Relevance Engine 结合了 AI 的最佳实践和 Elastic 的文本搜索。ESRE 为开发人员提供了一整套将复杂的检索算法和与大型语言模型（LLM）集成的能力。

2023-11-17

02-基于Apache SeaTunnel的MySQL到Elasticsearch实时同步解决方案-线上 meetup11.16
用 Apache SeaTunnel 以最快的方式，实现从 MySQL 到 ElasticSearch 实时同步，在本次分享中，我们将详细介绍这一解决方案的工作原理、如何配置和部署，以及实际的使用案例。

2023-11-17

04-腾讯云 Elasticsearch 助力企点业务腾飞 meetup 上海 10.21 2023
04-腾讯云 Elasticsearch 助力企点业务腾飞 meetup 上海 10.21 2023

2023-10-23

03-腾讯云ES在搜索场景的建设及优化经验分享 meetup 上海 10.21 2023

03-腾讯云ES在搜索场景的建设及优化经验分享 meetup 上海 10.21 2023

2023-10-23

02-腾讯云 Elasticsearch 新篇章 meetup 上海 10.21 2023
02-腾讯云 Elasticsearch 新篇章 meetup 上海 10.21 2023

2023-10-23

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章？
取消 删除