full gc频繁有什么问题_ES频繁GC问题一例

最新推荐文章于 2023-05-18 01:41:00 发布
最新推荐文章于 2023-05-18 01:41:00 发布
阅读量1.9k 收藏
点赞数
文章标签： full gc频繁有什么问题
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_29894211/article/details/113073183
版权

收到ES的告警，在1小时内意外分配了碎片，从而导致集群状态 Green > Yellow > Red > Yellow > Green 频繁切换？在此期间，ES不可访问，并且调用API开始返回非200的状态码。

fe8575f4858e78fd7baab592013db123.png

环境

3个主节点和3个工作节点。

错误分析

GC锯尺图

ecf4b247be13bfe33a654fb5d047e2a3.png

这种锯尺模式的原因是，ELasticsearch在执行某些操作搜索查询，写入查询，刷新，刷新操作等，频繁的创建新对象，JVM需要不断往堆上分配内存，但是，这些对象大多数都比较短暂，很快就会被堆的young区域中的GC<

最低0.47元/天 解锁文章
SonIC Lab
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
FULL GC隐患排查 优化
森林里的一天
03-16 354
    最近其它业务线反馈统一的国际化方案容易导致FULL GC，先简单说一下国际化方案：实现了一个filter，过滤所有的http请求，将请求头信息所带的语言环境存储到session里面，然后重新实现了response，对于文案统一采用编码的防范，response输出的时候将编码根据语言环境进行替换。    这里会有一个问题，如果是请求量比较大的应用，由于session的生命周期缘故，可能会导致...
关于ES集群频繁GC问题
qq_37490756的博客
06-28 3748
首先，作为一个JAVA应用，就脱离不开JVM和GC，因为应用层面生成大量长生命周期的对象，是给heap造成压力的主要原因，例如读取一大片数据在内存中进行排序，或者在heap内部建cache缓存大量数据。 其次，ES集群底层存储引擎是基于Lucene的，而Lucene的倒排索引(Inverted Index)是先在内存里生成，然后定期以段文件(segment file)的形式刷到磁盘的。每个段实际就是一个完整的倒排索引，并且一旦写到磁盘上就不会做修改。 API层面的文档更新和删除实际上是增量写入的一种特..
频繁Full Gc原因
最新发布
liaozhongmin_net
05-18 2496
系统承载高并发请求，或者处理数据量过大，导致Young GC很贫乏，而且每次Young GC过后存活对象太多，内存分配不合理，Survivor区过小，导致对象频繁进入老年代，频繁触发Full GC。系统一次性加载过多数据进内存，搞出来很多大对象，导致频繁有大对象进入老年带，必然频繁触发Full GC。系统发生了内存泄漏，莫名其妙创建大量的对象，始终无法回收，一直占用在老年代里，必然频繁触发Full GC。Metaspace（永久代）因为加载类过多触发Full GC。
065、案例实战：百万级数据误处理导致的频繁Full GC问题优化
牵着蜗牛_去散步
07-20 611
案例实战：百万级数据误处理导致的频繁Full GC问题优化欢迎大家加入我们的儒猿技术交流群，一个纯粹的交流技术、分享面经的地方。群里有一线大厂助教答疑、专栏优秀作业交流、互联网大厂面经分享、知名互联网公司内推，点击下方链接了解：儒猿技术交流群学员面经分享儒猿技术窝优秀学员作业展示儒猿技术交流群日常技术交流及助教答疑如何加群？点击了解儒猿架构官网上线，内有石杉老师架构课最新大纲，儒猿云平台详细介绍，敬请浏览官网：www.ruyuan2020.com（建议PC端访问）1、事故场景有一次一个线上系统进行了一次版.
es7学习笔记 cpu负载不均衡、超长fullGC、大量400报错
stay foolish
07-22 804
ElasticSearch负载不均衡 现象：往es7集群中推数时，发生如下情况 接口出现很多400 发现集群中某台机器cpu被怼爆 发生fullGC 产生400报错的原因是es7做了熔断优化，当jvm内存使用超过阈值，为了避免丑陋的oom，会直接限流并抛出EsRejectedExecutionException。 我们强硬的关掉了这个配置，因为我们的推数有失败重试。 产生fullGC是因为一个bulk批处理的数据量太大，我们一个文档1.5M，800个文档作为一批，两个线程并行推，jvm内
一次诡异的full gc查找问题全过程
08-26
在本篇文章中，我们将分享一个 Full GC 问题排查过程，通过示例代码和实际操作，介绍了如何快速定位 Full GC 问题的原因和解决方案。 问题描述 在我们的服务中，突然出现了频繁的 Full GC 问题，而服务本身没有...
Java full gc触发情况实例解析
08-19
例如程序第一次触发 Minor GC 后，有 6MB 的对象晋升到旧生代，那么当下一次 Minor GC 发生时，首先检查旧生代的剩余空间是否大于 6MB，如果小于 6MB，则执行 Full GC。当新生代采用 PS GC 时，方式稍有不同，PS GC...
AviatorEvaluator执行脚本导致Metaspace不足引发频繁 Full GC
01-07
AviatorEvaluator执行脚本导致Metaspace不足引发频繁 Full GC故障机经过 故障机经过 数据分析&特征平台DMP 最近频繁发生Full GC, 引发集群卡顿，导致经常超时，按照常规的方法，肯定是先看GC 日志 2020-02-17T10:17:...
第一集 _ 高延迟问题的罪魁祸首System.gc().pdf
08-20
在Java编程中，System.gc()是一个经常引起争议的函数，因为它触发的是Java虚拟机（JVM）的全局垃圾收集，可能导致应用程序出现显著的性能问题，特别是在高并发或者对延迟敏感的系统中。本文通过两个真实的案例，探讨...
MySql版本问题sql_mode=only_full_group_by的完美解决方案
09-09
MySQL版本问题，特别是关于`sql_mode=only_full_group_by`的设置，是一个常见的困扰开发者的问题。在MySQL中，`sql_mode`是一个变量，它定义了服务器执行SQL语句时遵循的规则集。`ONLY_FULL_GROUP_BY`是其中的一种...
full gc频繁的分析及解决案例
phantomes的专栏
05-25 2519
原位置： http://www.2cto.com/kf/201604/499063.html
ES集群在FullGC过大时的排查思路
Z_Flank的博客
02-25 390
本身查询qps很大，这个从慢日志上确实不太好找了，如果您遇到这类fielddata突增的情况可以通过这个命令判断一下是什么字段导致的fielddata突增。POST /索引名/_cache/clear?以及可以用这个命令定位一下具体是哪个索引导致的fielddata突增。然后针对该索引手动清理一下缓存即可。
记一次ES的GC问题
zhoxing
10-21 2943
一. 问题背景 在双十一时，有用户反馈推广平台物料列表出现了耗时严重的情况。筛选排序系统出现过耗时严重的情况，根据业务系统的筛选排序慢接口的traceId, 我们分析了一下请求链路上的瓶颈是ES. 二. 问题排查 首选我们在监控平台上确认了一下ES的访问流量，发现流量曲线变化不大，说明不是ES读请求压力突增导致的。 接着我们看了ES的bigdesk监控，发现有不少Full GC，与此同时查看了GC...
ES中JVM调优记录
beyond的博客
10-21 1064
2021.10.20 16:30 ES启动后无法正常访问，查看ES后台日志如下 日志分析： age1 -----------对象年龄代为1 ParNew Desired survivor size 17432576 bytes ------------期望的survivor大小为17432576 new threshold 6(max 6) JVM内部计算出的晋升阈值 从日志可以看出，JVM目前是age6时进入老年代，正常情况下，JV默认M是在age为15后进入老年代，导致这个的原因是新生代内存
一次让人难以忘怀的排查频繁Full GC过程
huaweitman的专栏
03-15 8735
我们的Java应用因频繁FULL GC导致性能降低很多，经过多人的定位也没有结论，于是我自主请命，经过一天的研究终于搞定了，现把经验与大家共享，相关的gc日志如下： 4.758: [Full GC [PSYoungGen: 464K->0K(71936K)] [PSOldGen: 37949K->33994K(68672K)] 38413K->33994K(140608K) [PSPermGen
fullGC过于频繁的原因和解决方案
liudezhicsdn的博客
04-10 1万+
案例1 系统高峰期fullGC频繁，优化后恢复正常。 导致原因： 系统中有一个调用频繁的接口会调用下面这个方法，目的是获取图片的宽高信息，但是Image这个对象用完不会自动释放，需要手动调用 flush()方法；以前没有调用这个方法，就导致一有请求就会有大对象进入old区，在业务高峰期old区一会就被打满，所以一直进行fgc。public static Image getImage(Strin
一次频繁Full GC的排查过程
热门推荐
沈鸿斌的博客
10-03 1万+
问题描述最近公司的线上监控系统给我推送了一些kafka lag持续增长的消息，我上生产环境去看了相应的consumer的情况，发现几台机器虽然还在处理消息，但是速度明显慢了很多。问题猜测与验证我猜测是JVM频繁做Full GC，导致进程也跟着频繁卡顿，处理消息的速度自然就慢了。为了验证这个想法，先用jstat看看内存使用情况： jstat -gcutil 1 1000 #1是进程号 结果如我所
ES内存那点事
很多时候，你缺少的不是知识而是热情
01-13 1万+
“该给ES分配多少内存？”  “JVM参数如何优化?“ “为何我的Heap占用这么高？” “为何经常有某个field的数据量超出内存限制的异常？“ “为何感觉上没多少数据，也会经常Out Of Memory？” 以上问题，显然没有一个统一的数学公式能够给出答案。 和数据库类似，ES对于内存的消耗，和很多因素相关，诸如数据总量、mapping设置、查询方式、查询频度等等。默认的设置虽开
用JAVA程序频繁FullGC 可能存在什么问题
04-01
1. 对象创建过多：如果程序中频繁创建大量的对象，会导致堆内存的使用量快速增加，当堆内存达到一定阈值时就会触发Full GC。 2. 内存泄漏：如果程序中存在内存泄漏问题，即程序中存在无法被垃圾回收器自动回收的...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值