从ES的JVM配置起步思考JVM常见参数优化

已于 2025-04-20 17:13:05 修改
阅读量9.4w 收藏 642
点赞数 482
CC 4.0 BY-SA版权
分类专栏： JVM理论与实操分析整合分享 ES相关技术学习汇总 文章标签： elasticsearch jvm 大数据
于 2024-12-03 09:18:03 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/xiaofeng10330111/article/details/139639510

目录

一、真实查看参数

（一）-XX:+PrintCommandLineFlags

（二）-XX:+PrintFlagsFinal

二、堆空间的配置

（一）默认配置

（二）配置Elasticsearch堆内存时，将初始大小设置为物理内存的一半（重点理解）

存储型服务（如 Elasticsearch）

计算型服务（如普通 Web 服务）

存储型服务（如 Elasticsearch）和 计算型服务（如普通 Web 服务）抉择

抉择结论分析

（三）堆外内存划分说明

元空间（Metaspace）

JIT编译后代码存放

本地内存

直接内存

JNI内存

（四）平常的应用服务较常用的调整分代比例

三、日志参数配置

（一）Java 8 jvm.options文件中的JVM日志参数配置

（二）Java 9+ jvm.options文件中的JVM日志参数配置

四、异常日志记录

（一）HeapDumpOnOutOfMemoryError

（二）HeapDumpPath

（三）ErrorFile

（四）作用和意义

五、垃圾回收器配置

（一）Java 8中Elasticsearch默认使用CMS垃圾回收器

（二）Java 9及以上版本垃圾回收器变化

六、额外自定义参数

（一）-Xss 参数

（二）-XX:-OmitStackTraceInFastThrow

（三）-Djava.awt.headless

七、分布式列存数据库Cassandra JVM参数简单回顾

干货分享，感谢您的阅读！

Java 8目前仍然是许多企业中主要使用的版本之一，尤其是对于比较保守的公司。在过去，CMS (Concurrent Mark-Sweep) 垃圾回收器在Java 8中是一种常见选择，因为它在某些场景下能够提供较好的性能。

然而，随着Java版本的不断更新，一些旧的特性和组件被淘汰或替代，比如CMS。Java 14中正式废弃了CMS，而新的垃圾回收器，如ZGC和G1，逐渐成为了主流选择。ZGC和G1在处理大内存堆和低停顿时间方面表现出色，适用于现代应用程序的需求。

另外，自Java 9以后，Java的发布模式也发生了变化，从长期支持（LTS）版本切换到了更频繁的发布，大约每六个月发布一次。Java 8和Java 11是目前支持的LTS版本，它们提供了更长时间的支持和维护，适合希望保持稳定性和兼容性的企业和组织使用。

关于JVM相关的优化和配置我们之前提到过很多基本的知识内容，比如如下的几篇重点内容，有时间可以在回顾一下：

涉猎内容 具体链接
基本知识内容
了解本专栏 订阅专栏 解锁全文 超级会员免费看
Elasticsearch的JVM配置
喝醉酒的小白
12-27 592
你还可以使用Elasticsearch的RESTful API来获取JVM的配置信息。是Elasticsearch进程的ID，运行上述命令将显示JVM的启动参数，包括堆内存的大小设置。在这个文件中，你可以找到有关堆内存大小、GC（垃圾回收）策略等设置的内容。这个请求将返回包含所有节点JVM设置的详细信息，包括内存大小、GC信息等。通过以上方法，你可以查看到Elasticsearch的JVM配置情况。文件中，这个文件位于Elasticsearch安装目录的。Elasticsearch的JVM设置通常保存在。
ElasticSearch中的JVM性能调优
javalingyu的博客
05-05 3446
ElasticSearch6.3.2 中的JVM性能调优 前一段时间被人问了个问题：在使用ES的过程中有没有做过什么JVM调优措施？ 在我搭建ES集群过程中，参照important-settings官方文档来的，并没有对JVM参数做过多的调整。但谈到JVM配置参数，少不了操作系统层面上的一些配置参数，比如 page cache 和文件描述符的个数：(/etc/security/limits.conf)。另外ES jvm.options配置文件也针对JVM参数做了一些优化，这里简要介绍一下ElasticS
Elasticsearch JVM调优：核心参数与关键技巧
最新发布
HTTP404_CN的博客
08-25 998
Elasticsearch JVM调优需谨慎，核心原则是保持大部分参数默认，仅调整关键参数。堆大小（-Xms和-Xmx）必须设为相同值，不超过物理内存的50%且建议≤30.5GB，以利用JVM的指针压缩优势。必须开启详细GC日志并定期分析。建议禁用系统交换，并调整vm.max_map_count至262144以上。其他JVM参数通常不应修改，除非有明确测试依据。调优应基于监控数据逐步进行，优先解决最显著瓶颈。
elasticsearch目录及配置参数说明
juedaifenghua2的博客
04-04 5454
elasticsearch目录及配置参数说明
【Elasticsearch专栏 18】深入探索：Elasticsearch核心配置与性能调优 & 保姆级教程 & 企业级实战
weixin_40736233的博客
02-26 1849
通过对Linux系统的内存、文件描述符、网络、I/O、CPU和线程、JVM和GC、集群和分片、监控和日志记录以及安全性等方面的优化设置，可以显著提升Elasticsearch集群的性能和稳定性。然而，随着数据量的不断增长和业务需求的不断变化，可能需要持续地对Elasticsearch集群进行优化和调整。
ES 配置文件 jvm配置
weixin_44399790的博客
06-16 2857
elasticsearch.yml 设置最大分片数 （默认1000）： cluster.max_shards_per_node: 1000000 kibana 设置默认查询数量（深度分页问题） PUT movies/_settings { "index" : { "max_result_window" : 20000 } } jvm.options 设置堆内存大小 -Xms8g -Xmx8g jvm hea...
ES的JVM配置
SouthPark的专栏
06-21 9286
JDK版本     使用JDK1.8的最新版本jdk-8u131-linux-x64.tar.gz（官方推荐ES5.4.1使用jdk-8u131以上的版本，我们现在es是1.7.1，计划升到5.X，所以用最新的）     JVM堆大小设置     Elasticsearch很耗内存、cpu。标准的建议是把50%的内存给elasticsearch，剩下的50%给Lu
ZGC 参数优化与 GC 触发机制解析分享
张彦峰的博客
04-07 9万+
本文深入探讨了 ZGC（Z Garbage Collector）参数优化与 GC 触发机制，旨在帮助开发者理解如何通过合理配置 ZGC 的参数来降低 Allocation Stall，提高系统吞吐量和稳定性。文章分析了影响 ZGC 性能的关键因素，如 heap 设置、线程池配置等，并通过实际案例展示了不同参数设置对 GC 行为的影响。通过对 GC 触发机制的解析，本文提供了可行的优化策略，以有效减少系统停顿时间，实现高效的内存管理。
动态扩缩容引发的JVM堆内存震荡：从原理到实践的GC调优指南
热门推荐
张彦峰的博客
03-09 11万+
本文分析了 JVM 内存弹性机制及其在高负载环境中的挑战，重点探讨了堆内存伸缩、内存扩展与收缩的核心机制。通过对系统发布后 GC 雪崩事件的分析，文章揭示了多代际内存管理中的响应差异，尤其是年轻代、老年代与 Metaspace 的协调问题。为避免这些问题，提出了优化内存配置、调整 GC 策略和合理设置代际大小的解决方案。此外，文章进一步探讨了从被动响应到主动防御的转变，建议结合智能调节与自动化监控机制。
如何选取合适的 NewRatio 值来优化 JVM 的垃圾回收策略
张彦峰的博客
03-10 10万+
本文探讨了 NewRatio 在 JVM 垃圾回收中的作用及优化策略。通过调整 NewRatio 值，可以在不同负载下优化新生代与老年代的内存分配，减少垃圾回收停顿。在高负载环境中，减小 NewRatio 有助于减少 Full GC 的频率，而低负载下则通过增大 NewRatio 提高内存利用率。结合 CMS 收集器和堆内存调整，合理配置垃圾回收参数，能显著提升 JVM 性能，优化内存管理。
es设置JVM堆大小
Ch3nnn的博客
12-16 4603
设置堆大小 默认情况下，Elasticsearch告诉JVM使用最小和最大大小为1 GB的堆。在进入生产阶段时，配置堆大小以确保Elasticsearch有足够的可用堆非常重要。 Elasticsearch将通过（最小堆大小）和（最大堆大小）设置分配jvm.options中指定的整个堆。XmsXmx 这些设置的值取决于服务器上可用的RAM数量。好的经验法则是： 将最小堆大小...
云计算平台(检索篇)-Elasticsearch-JVM设置篇(译)
weixin_30532987的博客
12-11 241
原文链接: http://jprante.github.com/2012/11/28/Elasticsearch-Java-Virtual-Machine-settings-explained.html 从2006年的java6 到现在java7无论是性能或其它方面都有了很大的改进，我们没有理由不在使用Java7,我个人也认为java7在内存方面比java6优秀. ...
Elasticsearch的JVM的配置
chizhuo3576的博客
06-29 1163
JVM配置 修改JVM - config/jvm.options 7.1下载的默认配置是1GB 配置的建议 Xmx和Xms设置成一样 Xmx不要超过机器内存的50% 不要超过30GB https://www.elastic.co/cn/blog/a-heap-of-troubl...
优化 Elasticsearch JVM 参数配置指南
hello.reader
07-23 1259
本文深入讲解了 Elasticsearch 中 JVM 参数的配置方式与优化实践，包括如何正确设置 JVM 堆内存、使用 JVM 参数文件覆盖默认配置、环境变量的设置方法，以及 JVM 日志和堆转储路径的自定义。合理的 JVM 设置能够提升 Elasticsearch 的性能与稳定性，避免常见的内存问题和 GC 问题。本文同时强调了官方推荐的最佳实践与注意事项，帮助开发者和运维人员正确地进行 Elasticsearch JVM 参数调优。
Elasticsearch基础2——es配置文件、jvm配置文件、log4j2.properties配置文件详解
百慕卿君博客
01-15 1万+
es配置文件基本参数详解+测试 jvm配置文件参数详解 log4j2.properties日志配置我呢见核心参数
ES JVM参数调优全攻略：提升集群稳定性与效率
haicha028765的博客
04-07 535
调整后，需密切关注堆内存的使用情况和垃圾回收频率，若仍存在内存不足或回收频繁的问题，可进一步微调。例如，使用-XX:+UseG1GC参数可启用G1垃圾回收器，它以区域化的方式管理堆内存，能有效控制垃圾回收的停顿时间，非常适合ES这种对响应时间要求较高的应用场景。通过科学合理的调优策略和持续不断的优化工作，能够显著提升ES集群的稳定性与效率，为业务的发展提供强大的技术支持。需要建立持续监控和优化的机制，定期评估集群性能，根据业务发展和性能变化，及时调整JVM参数，以保证ES集群始终处于最佳运行状态。
ES生产集群部署之jvm和服务器内存分配的最佳实践以及原理分析
06-24 3306
除了之前讲解的一些配置，根据你的集群环境特殊的配置，我们这一讲来讲解最重要的内存的分配，提出一些问题，生产环境部署es，不可避免要回答一个问题，比如我的机器上有64G的内存，或者32G的内存，那么一般来说我应该分配多少个G的内存给es的jvm heap 1、jvm heap分配 es默认会给jvm heap分配2个G的大小，对于几乎所有的生产环境来说，这个内存都太小了。如果用这个默认的heap size，那么生产环境的集群肯定表现不会太好。 有两个方式来调节es中的jvm heap size。最简单.
ES中JVM调优记录
beyond的博客
10-21 1242
2021.10.20 16:30 ES启动后无法正常访问，查看ES后台日志如下 日志分析： age1 -----------对象年龄代为1 ParNew Desired survivor size 17432576 bytes ------------期望的survivor大小为17432576 new threshold 6(max 6) JVM内部计算出的晋升阈值 从日志可以看出，JVM目前是age6时进入老年代，正常情况下，JV默认M是在age为15后进入老年代，导致这个的原因是新生代内存
记录一次jvm调优、es内存调优
qq_38485279的博客
04-24 532
来到客户现场部署，突然发现es环境只要进行写操作就会报OOM，下面是作者尝试的步骤，直到第六步才解决问题 1. 调优大法第一次尝试-修改jvm.options docker exec -it elasticsearch /bin/bash cd config vi jvm.options Xsmx2g Xsmx2g 2. 调优大法第二次尝试-修改配置文件 设置什么东西不超过20%来着 3. 调优大法第三次尝试-修改系统配置 设置系统配置虚拟内存为多少来着 4. 调优大法第四次尝试-释放内存 free -g查
JVM学习
03-24
### JVM 学习路径：入门到精通 #### 1. **JVM 的基本概念** 了解 JVM 的基础架构是学习的第一步。可以从以下几个方面入手： - JVM 的组成结构，包括类加载器、运行时数据区（堆、栈、元空间）、执行引擎等[^1]。 - 类加载机制及其工作原理，重点理解启动类加载器的作用以及其与其他类加载器的关系[^2]。 #### 2. **深入研究 Java 堆内存管理** Java 堆是 JVM 中最重要的内存区域之一，负责存储对象实例。以下是需要掌握的内容： - 堆的分配策略和垃圾回收算法（GC）的工作流程[^3]。 - 不同 GC 算法的特点及适用场景，例如 G1、CMS 和 ZGC。 ```java // 示例代码展示如何通过 JVM 参数查看堆内存状态 public class HeapInfo { public static void main(String[] args) { Runtime runtime = Runtime.getRuntime(); System.out.println("Max Memory: " + runtime.maxMemory()); System.out.println("Total Memory: " + runtime.totalMemory()); System.out.println("Free Memory: " + runtime.freeMemory()); } } ``` #### 3. **探索 JNI (Java Native Interface)** JNI 提供了一种方式让 Java 可以调用本地方法来访问底层硬件资源或其他编程语言的功能[^4]。学习 JNI 需要熟悉以下内容： - 如何声明 native 方法并编写对应的 C/C++ 实现。 - 数据类型的映射关系以及跨平台开发中的注意事项。 #### 4. **实践与调试工具的应用** 实际操作可以帮助巩固理论知识。推荐使用的工具有： - VisualVM 或 JConsole 来监控 JVM 性能指标。 - MAT(Memory Analyzer Tool) 分析内存泄漏问题。 - 使用 `-XX:+PrintGCDetails` 等命令行选项观察 GC 日志。 #### 5. **高级主题探讨** 当具备一定基础知识后，可进一步挑战更复杂的领域： - 并发控制机制与锁优化技术。 - 字节码层面的理解，利用 ASM 或 Javassist 动态修改字节码逻辑。 - 探讨 JIT 编译器是如何提升程序执行效率的。 --- ###
评论 1588
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

张彦峰ZYF

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值