初始ES(分布式搜索技术)

最新推荐文章于 2024-10-29 13:53:45 发布
最新推荐文章于 2024-10-29 13:53:45 发布
阅读量86 收藏
点赞数
文章标签： elasticsearch 分布式 大数据
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/AHOPEL/article/details/131649874
版权

分布式搜索技术——Elasticsearch

初始ES

什么是es

  • es是一款开源的搜索引擎，帮助我们从海量数据中快速找到所需要的内容

  • 结合kibana，logstash，beats为ELK，应用在日志分析，实时监控等领域
    在这里插入图片描述

  • es的底层是Lucene，apache的一个类库

    • 易扩展
    • 高性能（倒排）
    • 只限于java
    • 不容易水平扩展
    • 不支持集群
es的优点
  • 支持分布式，天然支持集群
  • 水平扩展
  • 提供RestFul接口，可以被任何语言调用
正向索引和到排序

  • 正向索引

    • 查询的时候是根据词条先找到文档，然后判断是否包含词条

    • 例如Mysql采用正向索引，当有大批量数据需要进行模糊查询的时候，进行逐条扫描，效率会比较低

  • 倒排索引

    • 对文档进行分词，对词条创建索引，查询的时候先根据词条找到文档id，从而获取文档

    • 文档（document）每条数据就是一个文档

    • 词条（term）文档按照语义分成的词，词条是唯一的

在这里插入图片描述

es和mysql的对比

  • es

    • 面向文档存储，文档数据被序列化为json格式后存储再es中

https://img-blog.csdnimg.cn/4b7d53789fbb49ea95b43b6b37432387.png

  • 索引 index，相同类型的文档集合，类似于关系型数据库中的表
  • 映射 mapping，索引中文档的字段约束信息，类似于表结构

在这里插入图片描述

  • 架构
    • Mysql ： 事务操作，确保数据的安全性和一致性
    • es：海量数据的搜索、分析、计算

在这里插入图片描述

es的安装

参照文档 https://juejin.cn/post/7074115690340286472

AHOPEL
关注
ElasticSearch分布式搜索引擎原理与代码实例讲解
AI天才研究院
07-08 934
随着互联网数据量的爆炸性增长，传统关系型数据库在处理大规模、实时查询时显得力不从心。数据检索的需求迫切需要一种更高效、灵活且可扩展的解决方案。ElasticSearch应运而生，作为一款开源的分布式全文搜索与分析引擎，它具备强大的数据索引、全文搜索、分析和监控功能，广泛应用于日志搜索、文档检索、实时分析等领域。解析阶段: 解析查询请求，提取查询条件和参数。过滤阶段: 使用过滤器筛选出满足条件的文档。聚合阶段: 对筛选后的结果进行聚合统计，生成结果集。排序阶段: 根据排序规则对结果集进行排序。
分布式搜索引擎 elasticsearch
KYGALYX的博客
02-07 3193
分布式搜索引擎 elasticsearch 第一部分 1.初识elasticsearch 1.1.了解ES 1.1.1.elasticsearch的作用 elasticsearch是一款非常强大的开源搜索引擎，具备非常多强大功能，可以帮助我们从海量数据中快速找到需要的内容 例如： 在GitHub搜索代码 在电商网站搜索商品 在百度搜索答案 在打车软件搜索附近的车 1.1.2.ELK技术栈 elasticsearch结合kibana、Logstash、Beats，也就是elasti
ElasticSearch 分布式搜索引擎 详解
共勉
12-23 1962
The Elastic Stack, 包括 Elasticsearch、Kibana、Beats 和 Logstash（也称为 ELK Stack）。能够安全可靠地获取任何来源、任何格式的数据，然后实时地对数据进行搜索、分析和可视化。Elaticsearch，简称为 ES，ES 是一个开源的高扩展的分布式全文搜索引擎，是整个 Elastic Stack 技术栈的核心。它可以近乎实时的存储、检索数据；本身扩展性很好，可以扩展到上百台服务器，处理 PB 级别的数据。
Elasticsearch 分布式架构原理
弹指天下
01-11 2680
前言 前面介绍了很多ES使用过程中的具体实战知识点，本文主要是谈谈ES分布式架构原理。 一、Elasticsearch特点 elasticsearch是近实时的分布式搜索分析引擎，底层实现还是基于Lucene的，核心思想是在多态机器上启动多个es进程实例，组成一个es集群。一下是es的几个概念： 接近实时 es是一个接近实时的搜索平台，这就意味着，从索引一个文档直到文档能够被搜索到有一个轻微的延迟 集群（cluster） 一个集群有多个节点（服务器）组成，通过所有的节点一起保存你的全部数据并且通过联合索
一文搞懂 Elasticsearch 分布式搜索&分析引擎
兴趣是最好的老师，勤能补拙
07-03 958
Elasticsearch是一个开源的分布式搜索和分析引擎，用于存储、搜索和分析大量的数据。它构建在Apache Lucene库之上，提供了简单易用的RESTful API和丰富的查询语言，使用户可以轻松地进行实时数据索引、搜索和分析。Elasticsearch的背景可以追溯到2010年，由Elastic公司（前称为Elasticsearch BV）创立，旨在解决传统关系型数据库无法处理海量数据和实时搜索的问题。
分布式搜索elasticsearch
m0_46453855的博客
06-18 237
elasticsearch是一款非常强大的开源搜索引擎，可以帮助我们从海量数据中快速找到需要的内容。 elasticsearch结合kibana、Logstash、Beats，也就是elastic stack (ELK)。被广泛应用在日志数据分析、实时监控等领域 elasticsearch是elastic stack的核心，负责存储、搜索、分析数据。
分布式搜索引擎 ElasticSearch（ES）
yueyue763184的博客
12-02 6701
elasticsearch是一款非常强大的开源搜索引擎，具备非常多强大功能，可以帮助我们从海量数据中快速找到需要的内容。elasticsearch结合、Logstash、Beats，也就是elastic stack（ELK），被广泛应用在日志数据分析、实时监控等领域。而elasticsearch是elastic stack的核心，负责存储、搜索、分析数据。
微服务 初始 分布式搜索引擎 Elastic Search
wanghuichen的博客
01-31 3644
什么是Elastic search？ 快速入门ES！
分布式搜索——Elasticsearch
m0_56188609的博客
10-31 728
elasticsearch是一款非常强大的开源分布式搜索引擎，可以帮助我们从海量数据中快速找到需要的内容。elasticsearch结合kibana、Logstash、Beats，也就是elastic stack（ELK：以elasticsearch为核心的技术栈，包括beats、Logstash、kibana、elasticsearch）。被广泛应用在日志数据分析、实时监控等领域elasticsearch是elastic stack的核心，负责存储、搜索、分析数据。
ELK日志分析平台——elasticsearch分布式部署
S_K15的博客
08-13 796
elasticsearch实战
@Elasticsearch之企业级高可用分布式集群（es分布式架构，集群规划，分布式集群调优策略）
weixin_45992021的博客
09-28 1460
ES 的分布式架构 ：分布式架构特性:高扩展，高可用，实时性 Es是一个分布式系统，隐藏了复杂的处理机制。集群 cluster：一个集群由一个或多个节点组织而成 它们持有整个数据 提供索引和搜索功能 每个集群都有一个共同的集群名称作为标识
ELK日志分析平台——Elasticsearch分布式搜索引擎
wwy0324的博客
11-01 685
一、简介 ELK简介 ELK是三个组件的缩写, 分别是Elasticsearch, Logstash, Kibana. ELK平台可以用于实现日志收集、日志搜索和日志分析 Elasticsearch: 是ELK的核心 一个分布式的实时文档存储，每个字段 可以被索引与搜索 一个分布式实时分析搜索引擎 能胜任上百个服务节点的扩展，并支持 PB 级别的结构化或者非结构化数据 Logstash: 简单说是一个日志收集工具, 可以定义从哪里获取数据, 并且可以简单处理数据, 最后可以定义将数据输出到哪里, 一般输
Elasticsearch分词器基础安装
Think_and_work的博客
10-24 444
Elasticsearch (ES) 是一个基于 Lucene 的搜索引擎，分词器是其核心组件之一，负责对文本数据进行分析和处理。
前端 eslint 配置，以及在git提交之前自动format
weixin_43794095的博客
10-28 510
众所周知，前端项目可以在报很多error的情况下运行。但是良好的代码规范仍然有利于项目的开发维护，这里提供我的规范，仅供参考。
ElasticSearch 入门需要了解的概念
TechCraftsman数据库专栏
10-26 1151
ElasticSearch 入门需要了解的概念
Elasticsearch 实战应用
weidl001的博客
10-25 968
无论是用于构建复杂的全文搜索系统、进行日志数据分析，还是提供地理位置的实时查询，Elasticsearch 都提供了强大的功能和工具，使开发人员可以更高效地管理和分析数据。在使用 Elasticsearch 时，良好的集群配置和优化实践是成功应用的关键，通过这些方法可以确保在实际环境中实现最佳的性能和可靠性。在生产环境中，单节点的 Elasticsearch 性能和可靠性有限，因此通常需要将 Elasticsearch 部署为集群，以支持大规模数据的存储和查询。指定了节点的角色，包括主节点和数据节点。
基础设施即代码（IaC）：自动化基础设施管理的未来
Echo_Wish的博客
10-27 266
基础设施即代码（IaC）是一种将基础设施配置管理自动化的实践。借助IaC，开发和运维团队可以通过编写代码来定义、管理和部署计算资源（如服务器、存储和网络配置等）。IaC的理念是“代码即基础设施”，也就是说，你可以像管理软件源代码一样，管理和追踪基础设施的配置。通过IaC，基础设施的配置文件通常采用声明性语言（如YAML、JSON等）编写，用户可以在不同环境间轻松复制和共享配置文件，并通过版本控制管理这些文件。
Qlik Sense Recreate certificates
★【World Of Moshow 郑锴】★
10-24 1272
How to recreate or just delete certificates in Qlik Sense - No access to QMC or Hub . There may be several different symptoms associated with a need to regenerate and redistribute certificates;
Elasticsearch
最新发布
qq_35861084的博客
10-29 599
Spring Data Elasticsearch 还支持，可以通过@Service// 自定义查询.build();原理：Elasticsearch 使用倒排索引、分片和副本机制提供高性能的分布式查询，适合处理海量数据的搜索和分析需求。使用场景：在全文搜索、日志分析、推荐系统和数据分析中应用广泛。Spring Boot 集成：通过 Spring Data Elasticsearch 简化了数据交互操作，实现方便的 CRUD 和复杂查询。
Elasticsearch 分布式搜索与数据分析详解
Elasticsearch 是一个开源的全文搜索引擎，以其分布式、实时、可扩展性以及强大的数据分析能力而闻名。它使用JSON作为数据交换格式，并提供了丰富的API来操作索引、搜索、聚合等。本指南深入介绍了Elasticsearch的...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值