安全生产：内存溢出和内存泄漏

一、什么是内存

内存（Memory）是计算机用于存储和访问数据和指令的设备。它是计算机系统中的一个重要组成部分，用于临时存储和处理数据。内存可以被看作是计算机的”大脑”，用于存储正在执行的程序和数据，以及中间结果和临时变量。

计算机内存由一系列存储单元组成，每个存储单元都有一个少数的地址。这些存储单元可以存储二进制数据，包括程序指令和运行时数据。内存的主要特点是可以读取和写入数据，以及较快的访问速度。

内存分为几个不同的层次。非常快速但最小容量的是处理器内部的寄存器，用于存储指令和数据的中间结果。其次是高速缓存（Cache），它是位于处理器和主内存之间的一种存储器，用于加速对常用数据的访问。最后是主内存（RAM），它是计算机系统中最大的存储器，用于存储当前正在执行的程序和数据。

内存的容量通常以字节（Byte）为单位进行衡量。常见的内存容量单位有千字节（Kilobyte，KB）、兆字节（Megabyte，MB）、千兆字节（Gigabyte，GB）和万兆字节（Terabyte，TB）等。随着技术的发展，内存容量不断增加，以满足现代计算机处理大规模数据和复杂任务的需求。

需要注意的是，内存是一种临时存储设备，当计算机断电或重新启动时，内存中的数据将被清空。 因此，为了长期保存数据，需要将其存储到永久性存储介质（如硬盘或固态硬盘）中。

二、定义不同

• 内存溢出（Out Of Memory 即 OOM）：程序在申请内存时，没有足够的内存空间供其使用，就会发生内存溢出。

• 内存泄漏（Memory Leak）：程序在申请内存后，无法（及时）释放已申请的内存空间，一次内存泄漏可能影响不大，但内存泄漏积累后，会极大影响程序运行，可能导致内存耗尽甚至系统崩溃。

以发生的方式来分类，内存泄漏可以分为4类：

1. 常发性内存泄漏：发生内存泄漏的代码会被多次执行到，每次被执行的时候都会导致一块内存泄漏。

2. 偶发性内存泄漏：发生内存泄漏的代码只有在某些特定环境或操作过程下才会发生。常发性和偶发性是相对的。对于特定的环境，偶发性的也许就变成了常发性的。所以测试环境和测试方法对检测内存泄漏至关重要。

3. 一次性内存泄漏：发生内存泄漏的代码只会被执行一次，或者由于算法上的缺陷，导致总会有一块仅且一块内存发生泄漏。比如，在类的构造函数中分配内存，在析构函数中却没有释放该内存，所以内存泄漏只会发生一次。

4. 隐式内存泄漏：程序在运行过程中不停的分配内存，但是直到结束的时候才释放内存。严格的说这里并没有发生内存泄漏，因为最终程序释放了所有申请的内存。但是对于一个服务器程序，需要运行几天，几周甚至几个月，不及时释放内存也可能导致最终耗尽系统的所有内存。所以，我们称这类内存泄漏为隐式内存泄漏。

从用户使用程序的角度来看，内存泄漏本身不会产生什么危害，作为一般的用户，根本感觉不到内存泄漏的存在。真正有危害的是内存泄漏的堆积，这会最终消耗尽系统所有的内存。从这个角度来说，一次性内存泄漏并没有什么危害，因为它不会堆积，而隐式内存泄漏危害性则非常大，因为较之于常发性和偶发性内存泄漏它更难被检测到。

三、产生原因不同

• 内存溢出：内存溢出的产生通常是因为程序申请的内存超出了系统能够提供的范围，比如试图创建一个超大的数组或对象，超过了系统或虚拟机的限制。比如申请了一个integer，但给它存了long才能存下的数，就会造成内存溢出。

  举个例子：一个盘子用尽各种方法只能装4个果子，你装了5个，结果掉倒地上不能吃了。这就是溢出！比方说栈，栈满时再做进栈必定产生空间溢出，叫上溢，栈空时再做退栈也产生空间溢出，称为下溢。就是分配的内存不足以放下数据项序列，称为内存溢出。
  再或者：比如总内存大小是100MB，一次程序运行结束有，有10MB 没有释放，当前可用内存还有90MB，程序还可以运行。但是多次运行后，可用内存最终为0， 没有可以内存或内存不足时，程序在下一次运行时，会因为内存不足，而出现内存溢出。

  放在实际项目中，引起内存溢出的常见原因有以下几种：
  

  1. 堆内存分配不合理：最常见的内存溢出情况是堆内存不足。当应用程序分配的对象超出了可用堆内存容量时，就会发生OutOfMemoryError。

  2. 内存中加载的数据量过于庞大。例如：如果应用程序需要处理大文件，但没有适当的缓冲机制或分段读取机制，可能会导致内存溢出；或查询结果返回大的数据集合：这是在日常工作中经常出现的场景，一般出现在操作数据库大表的情况下，一些关键的查询条件缺失导致从数据库中读取了大量的结果集导致内存溢出；或大量字符串的操作：大规模字符串操作可能会创建大量临时字符串对象，占用大量堆内存。

  3. 集合类中有对对象的引用，使用完后未清空，使得JVM不能回收。例如应用程序打开了大量的数据库连接、文件句柄或网络连接，但没有适时关闭它们，会导致资源泄漏和内存溢出；

  4. 代码中存在死循环或循环产生过多重复的对象实体：当递归函数调用层次过深，或者在栈上分配的局部变量太多，会导致栈内存溢出错误（StackOverflowError）；

  5. 使用的第三方软件中的BUG；

  6. 启动参数内存值设定的过小 。

  7. 大量的线程创建：创建大量线程可能会占用大量内存，特别是在每个线程都有较大堆栈的情况下。确保只创建必要数量的线程，并及时回收不再需要的线程。

  8. 缓存使用不合理：使用缓存时，如果缓存中的对象长时间不被使用，可能会导致内存溢出。需要定期清理不再需要的缓存项。
     
     

  注⚠️：内存泄露（memory leak）会最终会导致内存溢出（out of memory）！

• 内存泄漏：内存泄漏通常是由于程序的设计问题导致的，比如忘记释放已经不再使用的内存，或者引用已不需要的对象，使得这部分内存无法被回收。

单例模式中，单例的生命周期和应用程序是一样长的，所以单例程序中如果持有对外部对象的引用的话，那么这个外部对象是不能被回收的，则会导致 内存泄露 的产生。

一些提供close的资源未闭导致 内存泄漏 。数据库连接（dataSource.getConnection() ），网络连接（socket）和 IO流的连接必须在finally中 close，否则不能被回收的。

读取大文件，一次读取的文件大于可用内存，会导致 内存溢出 。可用内存是1G，怎么读取2G的文件呢？建一个100MB的字节数组，读10次。

四、处理方式不同

• 内存溢出：对于内存溢出的问题，通常需要检查程序是否有不必要的大内存申请，或者优化程序使得内存使用更加高效。

  放在实际项目中，内存溢出的解决方案如下：

  1. 检查java启动项中对于java堆内存的设置是否合理。常用的启动参数如下：
     堆内存参数：
     -Xmx 最大的总堆内存；
     -Xms 初始总堆内存；
     -Xmn 年轻代堆内存；

     永久代参数：
     -XX:PermSize=128m 堆的初始大小，一般设置为128m即可，原则为预留30%的空间；
     XX:MaxPermSize=128m：堆的最大大小，一般设置为128m即可，原则为预留30%的空间；

  2. 在测试与生产环境（功能测试，压力测试）中启用堆转储。在java启动项中加入以下参数：
     -XX:+HeapDumpOnOutOfMemoryError ：当程序出现java.lang.OutOfMemoryErrors时生成heapdump文件；
     -XX:HeapDumpPath=<file or dir path> ： 生成的heapdump文件的路径；
     如果上述参数已经设置，请检查相应的文件价中是否存在heapdump文件，如存在，说明程序曾出现内存溢出的情况，需进一步进行排查。

  3. 查看测试与生产环境中的垃圾回收日志。Java的垃圾回收日志可以提供关于垃圾回收活动的详细信息。在java启动项中加入参数如-XX:+PrintGCDetails和-XX:+PrintGCDateStamps来启用垃圾回收日志。如已启动，可获取gc日志以了解内存回收情况和潜在问题。

  4. 监控测试与生产环境中的内存使用情况。使用JBOSS的产品可以通过JBOSS控制台查看应用的内存使用情况，也可以通过jstat，jmap命令查看jvm堆内存的使用情况。

  5. 压力测试。压力测试是发现内存泄漏较好的阶段，有条件的产品组可以通过上述方式，观察并分析应用程序是否会导致内存泄漏。

  6. 检查错误日志，查看 “OutOfMemory” 错误前是否有其它异常或错误。

  7. 对代码进行走查和分析，找出可能发生内存溢出的位置。

重点排查以下几点：

• 检查数据库查询中是否有一次获得全部数据的查询（即全表查询）。 一般来说，如果一次取十万条记录到内存，就可能引起内存溢出。 这个问题比较隐蔽，在上线前，数据库中数据较少，不容易出问题，上线后，数据库中数据多了，一次查询就有可能引起内存溢出。因此对于数据库查询尽量采用条件查询和分页的方式查询。

• 检查代码中是否有死循环或递归调用。

• 检查是否有大循环重复产生新对象实体。

• 检查List、MAP等集合对象是否有使用完后，未清除的问题。 List、MAP等集合对象会始终存有对对象的引用，使得这些对象不能被GC回收。

4. 使用内存查看工具动态查看内存使用情况。Jmap获取内存堆信息/arthas在线分析。

• 内存泄漏：对于内存泄漏的问题，首先需要定位程序中导致内存泄漏的部分，然后修复这些问题，比如及时释放不再使用的内存，或者取消对不再需要的对象的引用。

五、影响程度不同

• 内存溢出：内存溢出会导致程序立即崩溃或者抛出错误，影响较大。

• 内存泄漏：一次小的内存泄漏可能不会立即影响程序运行，但是如果大量内存泄漏累积，最终会导致内存耗尽，影响系统的正常运行。

六、检测工具不同

• 内存溢出：可以通过一些性能监控工具来预防内存溢出，如JProfiler、MAT等。

• 内存泄漏：一些内存分析工具可以帮助检测内存泄漏，如Valgrind、LeakCanary等。

七、拓展阅读

• 《JavaScript进阶（十五）：JS 垃圾回收机制》
• 《JVM进阶(四)：利用 MAT 排查堆溢出》
• 《JVM进阶(七)：从 GC 日志分析堆内存》
• 《剑指Offer——简述堆和栈的区别》
• 《JVM进阶(二)：初识 JAVA 堆》
• 《JVM进阶(一)：初识 JAVA 栈》