JVM性能调优-开篇

遇到的问题

在实际生产环境运行过程中，我们时不时会遇到，服务假死、接口无响应等服务器问题。

这时我们通过grafana平台，可以看到cpu或者内存不断告警，是接口并发数过多，还是应用系统出现bug？我们没有那么多时间一一排查，这时我们唯一能做的就是赶紧重启让服务恢复正常。

但回过头来，我们也会想，为什么突然会有这个问题，如果以后再发现我们要怎么排查呢？

以下是AI给出的排查步骤

在生产环境中遇到服务假死或接口无响应的情形时，即时恢复服务固然重要，但更为关键的是通过系统性的方法诊断问题，以防未来再次发生。下面是排查此类问题的建议步骤：

1.**临时恢复服务**：
  - 如果服务对业务影响较大，优先通过重启服务快速恢复。
  - 有计划地在低峰时段重启服务，以减少对用户的影响。

2.**日志分析**：
  - 分析服务的日志文件，包括标准输出和错误输出，搜索异常、错误或奇怪的行为模式。
  - 查找与服务假死时间相匹配的日志，看是否存在异常的错误栈信息或错误码。

3.**监控数据回顾**：
  - 利用 Grafana 等监控工具，回顾问题发生前后的各项指标图表数据，例如 CPU 使用率、内存使用量、垃圾回收活动、线程和堆栈使用情况。
  - 关注特定时间段内的请求量和响应时间，识别是否为流量高峰或特定类型的请求导致。

4.**线程和堆转储分析**：
  - 在问题发生时获取 JVM 的线程转储(`jstack`)和堆转储(`jmap`)，利用分析工具（如 MAT,VisualVM 等）诊断问题。
  - 检查死锁、线程等待和阻塞情况，确定性能瓶颈。

5.**性能剖析**：
  - 使用 Java 性能剖析工具（如 JProfiler 或 YourKit）对服务运行情况进行实时剖析，定位性能问题。

6.**代码审查**：
  - 基于排查结果，审查相关代码区域，特别是最近修改、添加的代码。
  - 查找可能导致内存泄露、死锁、长时间运行的循环或迭代等常见问题。

7.**系统资源和配置审查**：
  - 检查操作系统层面的资源和配置，包括文件句柄限制、网络连接和系统负载。
  - 审查服务配置，确定是否存在误配置或限制。

8.**压力测试**：
  - 在类似生产的环境中进行压力和性能测试，尝试复现问题。如果能够复现，那么就可以进行详细的诊断分析。

9.**调用链追踪**：
  - 使用分布式追踪系统（如 Zipkin,Jaeger 等）来审查请求在各服务间的调用链路，查找性能瓶颈。

10.**CI/CD过程审计**：
   - 查看持续集成和部署的过程，确定是否有不当的变更没有被正确审计。

为了避免这样的问题再次发生，您可以采取以下的预防措施：

- 实施持续的性能监控。
- 优化代码和配置，以防止资源泄漏。
- 对业务关键服务实行适当的负载测试。
- 增强故障转移和自动恢复能力。
- 定期对系统进行弹性和容错性测试。
- 提升服务的监控和告警能力，确保问题可以更早地被发现。

请记住，复杂的生产问题通常是多因素导致的，需要一个综合的分析和系统化的方法来解决。对于复杂的问题，不应仅凭单一数据或直觉做出判断。
 

另外，你可以参阅这些资源来获取关于Java性能监控和故障诊断的更多信息：

1.Java性能：JVM监控、调优指导手册 - 这是关于Java性能监控和调优的经典书籍之一。

2.官方 Java 文档中的 Java 性能调优指导 - 官方文档通常是最权威的消息源。

3.使用 Java Flight Recorder - 它是一个内置于JVM中的强大工具，用于收集Java虚拟机的性能和其他类型的数据。

4.Apache JMeter – 进行应用压力测试。

5.Grafana 和 Prometheus – 实现监控系统和警报。

你应该建立一个可持续的性能监控和问题解决流程：

• 自动化测试：确保CI/CD流程中包含压力和回归测试来捕捉性能问题。
• 预警系统：设置阈值和模式识别，当接近问题发生的信号时自动通知相关团队。
• 故障演练：定期进行故障演练（如Netflix的Chaos Monkey）以准备系统对突发问题的响应。
• 文档记录：确保所有问题解决步骤都有清晰的文档记录，以便回顾和训练。

处理问题并非一蹴而就，需要一个组织的持续贡献去构建一个健壮的系统和高效的故障排查流程。希望这些建议对您有所帮助。如果您需要关于特定主题的进一步关联资料和指导，我可以提供更专业的意见。

 其中我们要关注的内容是，如何通过jvm的监控和分析找到问题，对系统进行调优。

jvm性能调优的整体架构

官方 Java 性能调优指导

https://docs.oracle.com/en/java/javase/21/vm/java-virtual-machine-technology-overview.html

jdk21的jvm性能增强

紧凑string

分层编译

压缩的普通对象指针

逃逸分析

 垃圾收集

为了支持这种多样化的部署，JavaHotSpot VM 提供了多个垃圾收集器，每个垃圾收集器都被设计用来满足不同的需求。JavaSE 根据运行应用程序的计算机的类选择最合适的垃圾收集器。但是，这种选择可能不适用于每个应用程序。具有严格性能目标或其他需求的用户、开发人员和管理员可能需要显式地选择垃圾收集器并调优某些参数以实现所需的性能级别。

工具的使用

jps\jinfo\jstack\jmap

dump

MAT\Jconsole\jvisualvm