如何排查java 内存溢出OutOfMemoryError？

最新推荐文章于 2024-06-01 18:13:44 发布

ljh_learn_from_base

最新推荐文章于 2024-06-01 18:13:44 发布

阅读量1.3k

点赞数 17

文章标签： java 排查内存溢出

本文链接：https://blog.csdn.net/ljh_learn_from_base/article/details/134605349

版权

当使用Spring Boot进行文件上传时，文件会被读取到内存中进行处理。如果上传的文件较大，会占用大量的内存空间，从而导致内存溢出（OutOfMemory）问题。以下是一些建议的排查方案：

调整 JVM 内存设置：增加 JVM 的最大堆内存分配。

要增加 JVM 的最大堆内存分配，您可以使用 -Xmx 命令行选项。-Xmx 选项用于设置 Java 堆内存的最大值。您可以根据需要调整此值。

以下是如何使用 -Xmx 选项设置最大堆内存分配的示例：

java -Xmx2048m -jar your_application.jar

在这个示例中，我们将最大堆内存分配设置为 2048MB（2GB）。您可以根据需要调整此值。

如果您使用的是 IDE（如 IntelliJ IDEA 或 Eclipse），您可以在运行配置中设置 -Xmx 选项。以下是在 IntelliJ IDEA 中设置最大堆内存分配的步骤：

打开 “Run/Debug Configurations” 对话框。
选择您的应用程序运行配置。
在 “VM options” 文本框中，输入 -Xmx2048m（或您需要的任何其他值）。
点击 “Apply” 保存更改。

请注意，设置过大的堆内存分配可能会导致系统资源不足，从而导致性能问题。因此，在设置最大堆内存分配时，请根据实际需求和系统资源进行调整。这将限制数据库连接池的大小，从而减少内存使用

限制上传文件的大小：在应用程序中设置上传文件的最大大小限制。在 Spring Boot 中，可以在 application.properties 文件中添加以下配置：
```
spring.servlet.multipart.max-file-size=500MB
spring.servlet.multipart.max-request-size=500MB
```
这将限制单个文件和整个请求的最大大小。
使用文件系统存储：将上传的文件存储在文件系统中，而不是将它们保存在内存中。可以使用 Spring Boot 的 spring-boot-starter-web 模块中的 MultipartFile 类来实现。
启用垃圾回收器（GC）日志：检查 GC 日志以了解内存使用情况。可以通过在 application.properties 文件中添加以下配置来启用 GC 日志：
```
spring.jmx.enabled=true
spring.application.admin.enabled=true
```
然后，在应用程序的日志中查找 GC 相关的消息。
使用内存分析工具：使用内存分析工具（如 VisualVM、MAT 或 Eclipse Memory Analyzer）来检查内存泄漏和异常的根源。这些工具可以帮助您找到内存溢出的原因，并提供解决方案。
代码审查：仔细审查代码以查找可能导致内存溢出的问题。确保在处理文件上传时正确关闭资源、释放内存，并遵循最佳实践。
使用内存泄漏检测工具：使用内存泄漏检测工具（如 LeakCanary、Eclipse Memory Analyzer 或 VisualVM）来检测内存泄漏。这些工具可以帮助您找到潜在的内存泄漏问题，并提供解决方案。

通过遵循这些建议的排查方案，您应该能够找到导致 Spring Boot 文件上传内存溢出的原因，并采取相应的措施来解决问题。

如何排查Caused by: java.lang.OutOfMemoryError: Java heap space

java.lang.OutOfMemoryError: Java heap space 错误表示 Java 应用程序运行时的堆内存不足。要排查此问题，您可以采取以下步骤：

增加堆内存分配：使用 -Xmx 命令行选项增加最大堆内存分配。例如，要将最大堆内存分配设置为 2GB，运行以下命令：
```
java -Xmx2048m -jar your_application.jar
```
如果您使用的是 IDE（如 IntelliJ IDEA 或 Eclipse），您可以在运行配置中设置 -Xmx 选项。
分析堆内存快照（Heap Dump）：使用 jmap 工具创建堆内存快照，并使用 jhat 或其他堆分析工具进行分析。例如，要创建进程 ID 为 12345 的堆内存快照，运行以下命令：
```
jmap -dump:format=b,file=heapdump.hprof 12345
```
然后，使用 jhat 分析堆内存快照：
```
jhat heapdump.hprof
```
您可以使用浏览器访问 http://localhost:7000/ 以查看堆内存快照分析结果。
使用内存分析工具：使用内存分析工具（如 Eclipse Memory Analyzer、VisualVM、MAT 等）分析堆内存快照。这些工具可以帮助您找到内存泄漏、大对象分配等问题。
代码审查：审查代码以查找可能导致内存泄漏或大对象分配的问题。例如，确保正确关闭资源、避免在循环中创建大对象、避免使用全局变量等。
使用内存分析工具：使用内存分析工具（如 VisualVM、JProfiler 等）实时监控应用程序的内存使用情况。这些工具可以帮助您找到内存泄漏、大对象分配等问题。
使用 GC 日志：启用 GC（垃圾收集器）日志以查看垃圾收集器的行为。这可以帮助您了解垃圾收集器的工作情况以及可能的问题。

通过以上步骤，您可以排查 java.lang.OutOfMemoryError: Java heap space 错误。请注意，排查内存泄漏和性能问题可能需要一些时间和耐心。在解决问题时，请确保遵循最佳实践，以避免对系统造成不必要的负担。

最大堆内存分配一般是多大，如果设置过小会发生什么？

最大堆内存分配的大小取决于您的系统资源和应用程序需求。通常，建议将最大堆内存分配设置为系统可用内存的 50% 到 80%。然而，具体的设置取决于您的应用程序和系统配置。

如果设置过小，可能会导致以下问题：

内存不足：应用程序可能会遇到内存不足的问题，导致性能下降或应用程序崩溃。
频繁的垃圾收集：如果堆内存分配过小，垃圾收集器可能会过于频繁地运行，导致应用程序性能下降。
OutOfMemoryError：如果堆内存分配过小，可能会导致 java.lang.OutOfMemoryError: Java heap space 错误。

为了避免这些问题，建议根据您的应用程序和系统需求合理设置最大堆内存分配。如果您的应用程序需要大量内存，可以考虑增加最大堆内存分配。同时，请确保监控系统资源使用情况，以便在需要时进行调整。

如何通过top命令查看java资源消耗情况？

top 命令是 Linux 系统中用于查看系统资源使用情况的实时工具。要通过 top 命令查看 Java 资源消耗情况，请按照以下步骤操作：

打开终端（Terminal）。
输入 top 命令并按回车键。这将启动 top 命令并显示系统的实时资源使用情况。
在 top 命令的界面中，您将看到一个列表，其中包含系统中运行的所有进程。默认情况下，列表按照 CPU 使用率从高到低进行排序。
要查找 Java 进程，请查找列表中的进程，其命令名称（COMMAND）列显示为 java。您可以使用 grep 命令来过滤结果，例如：top -b -n 1 | grep java。
要查看 Java 进程的资源消耗情况，请查看以下列：
- PID：进程 ID。
- USER：运行进程的用户。
- PR：进程优先级。
- NI：进程的 “nice” 值，表示调度优先级。
- VIRT：进程使用的虚拟内存。
- RES：进程使用的物理内存。
- SHR：进程使用的共享内存。
- S：进程状态（例如，S 表示睡眠，R 表示运行）。
- %CPU：进程使用的 CPU 百分比。
- %MEM：进程使用的系统内存百分比。
- TIME+：进程使用的累计 CPU 时间。
- COMMAND：运行的程序名称或命令。

通过观察这些列，您可以了解 Java 进程的资源消耗情况。请注意，top 命令提供了实时的资源使用情况，因此您可以在运行 Java 应用程序时使用它来监控资源消耗。

要退出 top，请按 q 键。

如何通过jstat -gc xx命令查看了java堆的状况?

jstat 是一个用于监控 Java 应用程序的命令行工具，它可以帮助您查看各种运行时数据，包括垃圾收集器的统计信息。要使用 jstat 查看 Java 堆的状况，请按照以下步骤操作：

首先，找到要监控的 Java 进程的进程 ID（PID）。您可以使用 jps 命令列出所有 Java 进程及其 PID。在终端中输入 jps 并按回车键。输出将类似于以下内容：
```
12345 Jps
67890 MyJavaApp
```
在这个例子中，12345 是 jps 进程的 PID，67890 是名为 MyJavaApp 的 Java 应用程序的 PID。
使用 jstat 命令查看 Java 堆的状况。在终端中输入以下命令，将 PID 替换为您在上一步中找到的 Java 应用程序的 PID：
```
jstat -gc PID
```
例如，如果您的 Java 应用程序的 PID 是 67890，则命令为：
```
jstat -gc 67890
```
执行此命令后，您将看到类似于以下内容的输出：
```
S0C    S1C    S0U    S1U      EC       EU        OC         OU       MC     MU    CCSC   CCSU       YGC     YGCT    FGC    FGCT     GCT   
1024.0 1024.0  0.0    0.0   20480.0  18816.0  204800.0   186943.0  20480.0 20480.0 20480.0 20480.0      4    0.020   0      0.000    0.020
```
这些列提供了有关 Java 堆的各种信息，包括：
- S0C 和 S1C：Survivor 0 和 Survivor 1 区的容量（以 KB 为单位）。
- S0U 和 S1U：Survivor 0 和 Survivor 1 区的使用空间（以 KB 为单位）。
- EC 和 EU：Eden 区的容量和使用空间（以 KB 为单位）。
- OC 和 OU：老年代（Old Generation）的容量和使用空间（以 KB 为单位）。
- MC 和 MU：元空间（Metaspace）的容量和使用空间（以 KB 为单位）。
- CCSC 和 CCSU：压缩类空间（Compressed Class Space）的容量和使用空间（以 KB 为单位）。仅适用于 Java 8 及更早版本。
- YGC：年轻代（Young Generation）的垃圾收集次数。
- YGCT：年轻代垃圾收集所用的累计时间（以秒为单位）。
- FGC：全局（Full）垃圾收集次数。
- FGCT：全局垃圾收集所用的累计时间（以秒为单位）。
- GCT：所有垃圾收集所用的累计时间（以秒为单位）。