【Elasticsearch】elasticsearch 线程池以及相关配置

已于 2024-01-08 11:11:06 修改
阅读量2k 收藏
点赞数
分类专栏： 大数据-Elasticsearch 文章标签： elasticsearch 线程池
于 2020-10-09 22:52:39 首次发布
本文为博主九师兄（QQ:541711153 欢迎来探讨技术）原创文章，未经允许博主不允许转载。
本文链接：https://blog.csdn.net/qq_21383435/article/details/108987952
版权
大数据-Elasticsearch 专栏收录该内容
561 篇文章 547 订阅 ¥79.90 ¥99.00
订阅专栏
本文详细介绍了Elasticsearch的线程池，包括核心线程池如搜索、获取和写入等，以及不同类型的线程池如Fixed、Scaling。文章还提及了线程池的默认配置和如何查看线程CPU利用率，帮助理解并优化Elasticsearch性能。
摘要由CSDN通过智能技术生成
了解本专栏 订阅专栏 解锁全文
九师兄
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 1
    评论
专栏目录
订阅专栏
ElasticSearch部署实战架构、容量规划优化
LoveSummer
07-31 1万+
本片文章先介绍了es的部署架构，回顾了es节点类型以及它们的配置方式，也了解了不同类型对硬件的要求不一样。然后总结了几种不同的架构模式，比如基础部署、读写分离、冷热分离、异地多活等架构模式，在生产环境中一般我们推荐读写分离架构模式，如果可以最好加上冷热分离，不过配置可能稍微复杂点。对于容量规划与调优，首先要明确存储的数据量和使用场景，推荐内存磁盘比为搜索类比例（116），日志类（148）；比如2T的总数据，搜索如果要保持良好的性能的话，每个节点31*16=496G。每个节点实际有400G的存储空间。...
ES线程池设置
大叶子不小的博客
08-31 2272
每个节点都会创建一系列的线程池来执行任务，许多线程池都有与其相关任务队列，用来允许挂起请求，而不是丢弃它。下面列出目前ES版本中的线程池。generic：用于通用的操作(例如，节点发现)，线程池类型为 scaling。index：用于index/delete操作，线程池类型为fixed，大小为处理器的数量，队列大小为200，允许设置的最大线程数为1+处理器数量。search：用于count/search/suggest操作。
Elasticsearch——配置详解
最新发布
smart_an的专栏
07-26 1202
作者简介：大家好，我是哥，前中兴通讯、美团架构师，现某互联网公司联系qq：184480602，加我进群，大家一起学习，一起进步，一起对抗互联网寒冬学习必须往深处挖，挖的越深，基础越扎实！
分布式搜索elasticsearch高级配置之（二）------线程池设置
热门推荐
云端分布式搜索技术
09-04 1万+
一个Elasticsearch节点会有多个线程池，但重要的是下面四个： 索引（index）：主要是索引数据和删除数据操作（默认是cached类型） 搜索（search）：主要是获取，统计和搜索操作（默认是cached类型） 批量操作（bulk）：主要是对索引的批量操作（默认是cached类型） 更新（refresh）：主要是更新操作（默认是cached类型） 可以通过给设置一个参数来
ElasticSearch--线程池(ThreadPool)--使用/设置
IT利刃出鞘的博客
09-14 4248
​ 本文介绍ElasticSearch的线程池的配置。 ES每个node都有多个线程池来管理内存占用，线程池都有一个queue来缓存需要处理的request而不是直接丢弃。 ES的线程池有点儿类似于Java中的线程池。...
深入Elasticsearch：线程池的原理与应用
码到三十五
02-07 1159
在Elasticsearch中，线程池是用于管理线程资源和控制并发度的关键组件。它通过将不同类型的操作映射到不同的线程池中，实现了资源的隔离和优化。Elasticsearch的线程池设计考虑了不同类型的操作对CPU、IO和内存等资源的需求，以及操作的优先级和并发度。Elasticsearch的线程池设计是其高性能和可扩展性的基石之一。通过合理地配置和优化线程池，可以确保Elasticsearch在各种工作负载下都能提供稳定、高效的搜索和分析服务。
Elasticsearch线程池配置
prometheus的博客
07-19 9910
1、查看节点状态GET _nodes/stats2、查看集群配置信息GET _cluster/settings3、线程池的三种类型cached #无限制的线程池，为每个请求创建一个线程。这种线程池是为了防止请求被阻塞或者拒绝，其中的每个线程都有一个超时时间(keep_alive)，默认5分钟，一旦超时就会回收/终止。 fixed #有着固定大小的线程池，大小由size属性指定，默认是5*core
ElasticSearch线程池配置
只有想不到的，没有做不到的。
09-22 1511
一个Elasticsearch节点会有多个线程池，但重要的是下面四个： 索引（index）：主要是索引数据和删除数据操作（默认是cached类型） 搜索（search）：主要是获取，统计和搜索操作（默认是cached类型） 批量操作（bulk）：主要是对索引的批量操作（默认是cached类型） 更新（refresh）：主要是更新操作（默认是cached类型）
Elasticsearch 线程池配置
05-13
可以通过配置线程池来优化 Elasticsearch 的性能。 以下是 Elasticsearch 中常用的线程池及其默认配置： 1. 线程池类型：Index 线程池 默认线程数：CPU 核心数 * 2 作用：处理索引请求 2. 线程池类型：Search ...
elasticsearch7.14
11-06
- 确保系统满足 Elasticsearch 的硬件要求，包括足够的内存（建议至少 2GB 用于开发环境，生产环境需更多）、足够的磁盘空间以及合适的处理器配置。 2. **Java 运行环境**： - Elasticsearch 基于 Java 运行，...
如何配置Elasticsearch的线程池？
03-29
以下是一些常见的线程池配置选项： 1. `thread_pool.<type>.size`：指定线程池的核心线程数。其中`<type>`是线程池的类型，例如`index`、`search`、`bulk`等。默认值为`number of processors`，即CPU核心数。 2. `...
ElasticSearch之线程池
Jackie的家
12-09 434
ElasticSearch之线程池
Elasticsearch7.x——配置详解
吴声子夜歌的博客
10-20 2190
当你想要在其他主机上形成一个有多个节点的集群时，你应该使用 discovery.seed_hosts 设置来提供一个集群中其他(符合主节点的条件的)节点的列表，并且可能是活动的和可连接的，以便启动 发现过程(discovery process)。默认情况下，节点包含以下所有类型: 符合主节点条件的节点(master-eligible)、数据节点(data)、预处理节点(ingest) 以及 机器学习(machine learning)(如果可用) 和 转换(transform)节点。
ElasticSearch模块threadpool
hanky19的专栏
01-07 1043
一个Elasticsearch节点会有多个线程池，但重要的是下面四个： 索引（index）：主要是索引数据和删除数据操作 搜索（search）：主要是获取，统计和搜索操作 批量操作（bulk）：主要是对索引的批量操作 更新（refresh）：主要是更新操作 可以通过给设置一个参数来改变线程池的类型（type），例如，把索引的线程池改成blocking类型： threadpool
探究ElasticSearch中的线程池实现
weixin_30527143的博客
01-05 158
探究ElasticSearch中的线程池实现 ElasticSearch里面各种操作都是基于线程池+回调实现的，所以这篇文章记录一下java.util.concurrent涉及线程池实现和ElasticSearch中如何自定义自己的线程池的。因为我们自己开发写代码，也经常会用到线程池，一般很少有机会自己去扩充实现一个自己的线程池，比如下面是我经常用的套路，其中SidSearchExceptionH...
Elasticsearch线程池调整
likanming11的博客
05-24 1098
1、临时调整线程池 curl -XPUT ‘192.168.2.24:9201/_cluster/settings’ -d ‘{ “transient”: { “threadpool.index.type”: “fixed”, “threadpool.index.size”: 1000, “threadpool.index.queue_size”: 10000 } }’
Elasticsearch线程池
王树钰的博客
12-07 1447
Elasticsearch在实际的开发使用中发现，如果每次使用都建立一次连接，那么对系统资源的消耗是巨大的，严重影响程序的性能，那么针对这种情况，我们自己实现一种线程池的，在使用时建立一次连接，然后将连接放入map中，每次使用中从map获取该连接。 具体代码如下： /** * @author Shuyu.Wang * @package:com.ganinfo.utils * @clas...
ElasticSearch 线程池类型分析之 ResizableBlockingQueue
weixin_30342827的博客
07-05 309
ElasticSearch 线程池类型分析之 ResizableBlockingQueue 在上一篇文章 ElasticSearch 线程池类型分析之 ExecutorScalingQueue的末尾，谈到了处理ES 搜索操作(search)的线程池的一些实现细节，本文就以下几个问题分析SEARCH操作的线程池。 如何统计一个线程池中的任务的排队等待时间、执行时间？排队等待时间是指任务提交给了线程...
【ElasticSearch】es 线程池 ThreadPool 的封装
九师兄
04-22 1621
10］elasticsearch源码深入分析——线程池的封装。
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

九师兄

你的鼓励是我做大写作的动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值