ES集群-分布式新增和查询

最新推荐文章于 2024-04-09 06:00:00 发布
最新推荐文章于 2024-04-09 06:00:00 发布
阅读量3k 收藏
点赞数
分类专栏： ES集群 文章标签： 分布式 elasticsearch docker
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/flybirdes/article/details/123527297
版权
本文档介绍了如何通过VMware启动Docker，并利用docker-compose配置和启动Elasticsearch集群，确保设置最大容量。接着，演示了使用Postman插入数据并利用DSL查询语句分析数据存储的分片位置。
摘要由CSDN通过智能技术生成

1.打开vmare 启动docker（systemctl start docker）

2.启动根据docker-compose创建es集群（docker-compose up -d），记得设置最大容量

3.集群启动成功

4.试着用postman插入数据

 5.在DSL的查询语句中添加"explain":true,来判断数据存储到哪个分片的

flybirdes
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
ElasticSearch----分布式搜索引擎
liu_to_liu的博客
08-19 2250
ElasticSearchElasticSearchRESTfulLuceneElasticSearchElasticSearch安装单节点安装HEAD 插件安装浏览器插件安装下载插件安装分布式安装Kibana 安装ElasticSearch核心概念介绍ElasticSearch核心概念集群（Cluster）节点（Node）索引（Index）类型（Type）文档（Document）分片（Shards）副本（Replicas）SettingsMappingAnalyzerElasticSearch Vs 关系
java 面试备战---分布式那点事
程序员爱酸奶
03-05 1493
分布式一致性：CAP理论 集中式应用进行服务化拆分后，必然会出现一个问题：如何保证各个节点（Node）之间的数据一致性？ 比如以下场景： 用户首先发起一次更新操作，映射到节点A；然后，用户又做了一次查询操作，操作映射到了节点B，此时A和B的数据如果不一致，对用户来说就会造成困扰。 分布式系统为了提高可用性，必然会引入冗余机制（副本），而冗余便带来了上面描述的一致性问题。为了解决这类问题，加州大学伯克利分校的Eric Brewer) 教授提出了 CAP 猜想。2年后， Seth Gilbert 和 Nancy
ES 分布式搜索
djph26741的博客
10-16 98
ES整个查询过程是scatter/gather的过程，具体如下： 图见https://blog.csdn.net/thomas0yang/article/details/78572596?utm_source=copy 最后 我是有些怀疑文章里面的说法的，因为如果都是由master来做merge的话，那么势必master的在查询比较多的时候会负载很高！我个人感觉应该是cli...
ES 分布式搜索入门
小P聊技术
02-28 271
1 主流分布式搜索引擎 1.1 Lucene Lucense官网地址： http://lucene.apache.org Lucene是一套用于全文检索和搜索的开放源码程序库，由Apache软件基金会支持和提供。Lucene提供了一个简单却强大的应用程序接口，能够做全文索引和搜索。Lucene是现在最受欢迎的免费Java信息检索程序库。 1.2 Solr Solr官网地址：https://lucene.apache.org/solr/ Solr（读作“solar”）是Apache Lucene项目的开源企
你知道ES的分布式搜索吗？
大道至简
02-28 459
根据上图，当客户端发起一个请求后，接受请求的节点变为协调节点，会先创建优先队列存储要查询的结果集 将请求发送给所有主节点(请求中默认会有一个routingvalues（通常默认是该文档的_id）参数， 然后ES对该参数进行shard = hash(routing) % number_of_primary_shards ，找到对应的节点)， 主节点在本地查询对应的top条数，将结...
【ELK】03、ES集群及ES查询
weixin_33882443的博客
04-20 239
上一篇主要学习了ES及其插件的安装，这一篇主要学习ES集群及其节点管理一、ES集群概述1、ES集群简介 ES就是为高可用和可扩展而生的，服务器的扩展可以通过购置性能更强的服务器(垂直扩展或者向上扩展，Vertical Scale/Scaling Up)，亦或是通过购置更多的服务器(水平扩展或者向外扩展，Horizontal Scale/Sc...
elasticsearch-8.1.2-windows-x86_64
04-02
4. **API 更新**：可能新增或改进了一些API，使得开发者能够更方便地与Elasticsearch交互。 5. **兼容性调整**：可能对Kibana、Logstash等Elastic Stack组件的兼容性进行了优化。 **二、Windows平台安装与配置** 1...
Elasticsearch的分布式架构、负载均衡、高可用以及容错性看这一篇就够了
01-27
总结来说，Elasticsearch的分布式架构保证了数据的横向扩展性，自动集群发现简化了集群管理，负载均衡确保了资源的有效利用，而高可用性设计则确保了系统的稳定性和数据的安全性。这些特性使得Elasticsearch成为大...
CentOS7.9.2009搭建elasticsearch7.11.1分布式集群
最新发布
z19861216的博客
04-09 1148
CentOS7.9.2009搭建elasticsearch7.11.1分布式集群
ES之分布式分页查询
a120717的博客
11-03 1208
我们知道ES的查询是非常快的，且每个索引的数据是存储在多个分片中的，查询压力负载到多个分片机器上，最后汇合查询结果，减轻了机器压力同时加快了速度。 但是当用户分页获取查询结果时，ES又是怎么获得全局的排序并取得分页结果呢？ 这不光是ES会遇到的问题，所有的分布式存储数据排序都会有这个问题。 逐步分析 假设我们的索引有5个分片，每个分片上10万个文档数据 获取1~10条 我们知道单个节点数据都在本地...
ElasticSearch3.0-es集群的数据入库
shouhuxianjian的专栏
03-08 1944
建表前优化这里，我采用的是elasticsearch-py与es集群进行交互。 因为有6台服务器作为es集群，如果只是针对一台进行录入，显然效率不高，所以可以同时对所有节点进行录入。 首先按照官网的优化介绍，有几个设置参数是必须在创建表之前就设定的，一旦录入数据之后，这几个参数就没法修改，并参考了下徽沪一郎大神这篇博文《elasticsearch性能调优》。 1 - 通过kibana的dev
【ES】探索集群 <二>
lihuapiao的专栏
08-25 536
1. 集群的健康     ★ 使用 _cat API 查看集群状态，如下的命令 curl "http://localhost:9200/_cat/health?v" // v 会显示出各个字段值代表的含义 返回的信息 大致如下 ： epoch timestamp cluster status node.total node.data shards p
【一文看懂 ES 核心】存储&查询&集群
dying 搁浅
12-28 2108
为了平衡索引存储的大小问题，ES 提供对索引进行了分片的能力，简单理解就是将一个大容量的索引分为多份存储，有几个分片就有几份，而分片可以分布在不同的节点上。通常来说企业级的 ES 一定是要组件集群的否则无法达到高可用，对于 ES 服务节点查询请求会发送到某一个 DataNode 数据节点上，此时这个节点会成为协调节点，该节点会广播这个查询请求到其他节点，其他节点在对应分片上进行数据查询最后将数据信息返回给协调节点，协调节点汇总数据进行返回。是可以被索引的基元，人话就是：一条数据，一条记录。
ElasticSearch入门知识（集群索引插入信息教程）
一曲无痕奈何
11-10 236
上篇索引创建 以ElasticSearch为界面入门（ElasticSearch搭建教程）： 索引插入信息：people是已经创建好的索引，man是类型、1是id 创建索引的代码：（在上篇的博客中索引创建中有详细教程创建索引） { "settings":{ "number_of_shards":3, "number_of_replicas":1 }, "mappings"...
ES 分页查询
www.hohode.com
01-04 2071
http://eggtwo.com/news/detail/147
es 插入数据_【ES 系列2】数据写入分析
weixin_39917211的博客
11-30 757
文章简介当出现文档写入请求时，ES 内部到底发生了哪些过程？面对大批量的写入请求，ES 如何可以做到近实时的可搜索？为了满足聚合分析的等功能，ES 又做了哪些事情？本文试图对这些问题进行回答，文章大纲如下所示：文档写入操作ES 内部文档处理过程文档最终数据格式文档写入操作创建索引PUT twitter { "settings" : { "number_of_shards" ...
2-Elasticsearch集群数据批量导入
唐影若凡的专栏
07-03 3365
1、数据形式我们采用Person的作为数据出发点，将文件中的序列化为Json的Person对象导入Elasticsearch集群中。1.1 数据类型public class Person { private int pid; // person id private int age; private boolean sex; private St
3. ES 的基础操作 —— 查询、聚合和分析
随笔
11-22 455
假设我们在某个公司工作。人力资源部门需要我们创建一个员工目录，需要满足如下需求： 能够包含多种类型的数据，包括数字、纯文本等等 能有用于检索员工信息 支持结构化搜索，例如查找30岁以上的员工。 支持简单的全文搜索和复杂的短语搜索。 高亮搜索结果中的关键字 利用图片分析和管理这些数据。 1. 插入数据 首先创建一个表（目录）用于存储员工的数据。 在 ES 中，我们将存储数据的目录称之为索引。在每...
Elasticsearch面试解析：集群架构与性能调优
一个具体的示例是，一个包含13个节点的Elasticsearch集群，拥有20多个基于日期的索引，每天新增约20个索引，每个索引有10个分片，每天处理超过1亿条数据，每个通道的日索引大小控制在150GB以内。对于这样的系统，...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值