java内存相关解释

最新推荐文章于 2022-12-29 13:45:42 发布

福海鑫森

最新推荐文章于 2022-12-29 13:45:42 发布

阅读量1.1k

点赞数

分类专栏：运维文章标签： java 内存

本文链接：https://blog.csdn.net/chen3888015/article/details/8008807

版权

运维专栏收录该内容

38 篇文章 1 订阅

订阅专栏

JVM中MemoryUsage中init,committed,used,max的含义

相当于每秒钟分配10M内存。
启动参数 -Xmx512m -Xms10m

结果：

init:10485760 略小于xms的10m

max:477233152 略小于xmx的512m

committed和used不停地增大，used始终小于committed,40几秒后达到max
,报Java.lang.OutOfMemoryError: Java heap space错误。

结论：init约等于xms的值，max约等于xmx的值。used是已经被使用的内存大小，committed是当前可使用的内存大小（包括已使用的），committed >= used。committed不足时jvm向系统申请，若超过max则发生OutOfMemoryError错误。

JVM内存监控，详细说明纠结很长时间的问题

垃圾收集器对应我们配置的垃圾回收方式，每种方式的名称会有所不同，当我们没有配置垃圾回收方式时一般为UseParallelGC这种方式
(1)-XX:+UseConcMarkSweepGC 并行的CMS垃圾回收方式
GC名：ParNew ConcurrentMarkSweep
内存池名：

CMS Perm Gen    Par Eden Space    Par Survivor Space    Code Cache    CMS Old Gen

(2)-XX:+UseParallelGC 并行垃圾回收
GC名：

PS Scavenge    PS MarkSweep

内存池名：

PS Survivor Space    PS Perm Gen 	PS Old Gen    PS Eden Space    Code Cache

(3)-XX:+UseParallelOldGC 并行垃圾回收
GC名：

PS Scavenge    PS MarkSweep

内存池名：

PS Survivor Space    PS Perm Gen    PS Old Gen    PS Eden Space    Code Cache

(4)-XX:+UseSerialGC 串行垃圾回收
GC名： Copy MarkSweepCompact
内存池名：

Survivor Space    Perm Gen    Tenured Gen    Eden Space    Code Cache

年轻代：PS Eden Space和PS Survivor Space
对应配置参数：-Xmn256M -XX:MaxNewSize=256M -XX:SurvivorRatio=2 -XX:MaxTenuringThreshold=5等
老年代：PS Old Gen
其值是：Old = Heap – Young={Eden,from,to}
对应配置参数包括：-Xms512m -Xmx1024m和年轻代的配置参数，from，to的值取决于SurvivorRatio这个参数的设置
持久代：PS Perm Gen
对应的配置参数：-XX:PermSize=256M -XX:MaxPermSize=512m
注：在观察内存的使用情况时首先保证相关的线条不是持续增长的，需要有
对应SO、S1区，Eden，old以及Perm和cache

回收的动作出现，并且可以估计其回收的内存大小，如果回收始终没有增长的多，特别是内存增长很多的情况，这时系统很可能存在内存泄露。这时我们可能需要通过其他的更详细的工具对系统的类及内存进行分析，如JMap等。

http://www.yayaw.com/?p=433

http://www.uml.org.cn/Test/200912106.asp

http://blog.csdn.net/hengyunabc/article/details/24924843

性能测试总结之内存泄露和内存溢出

刚刚做完了一个项目的性能测试，“有幸”也遇到了内存泄露的案例，所以在此和大家分享一下。

主要从以下几部分来说明，关于内存和内存泄露、溢出的概念，区分内存泄露和内存溢出；内存的区域划分，了解GC回收机制；重点关注如何去监控和发现内存问题；此外分析出问题还要如何解决内存问题。

下面就开始本篇的内容：

第一部分概念

众所周知，java中的内存java虚拟机自己去管理的，他不想C++需要自己去释放。笼统地去讲，java的内存分配分为两个部分，一个是数据堆，一个是栈。程序在运行的时候一般分配数据堆，把局部的临时的变量都放进去，生命周期和进程有关系。但是如果程序员声明了static的变量，就直接在栈中运行的，进程销毁了，不一定会销毁static变量。

另外为了保证java内存不会溢出，java中有垃圾回收机制。 System.gc()即垃圾收集机制是指jvm用于释放那些不再使用的对象所占用的内存。java语言并不要求jvm有gc，也没有规定gc如何工作。垃圾收集的目的在于清除不再使用的对象。gc通过确定对象是否被活动对象引用来确定是否收集该对象。

而其中，内存溢出就是你要求分配的java虚拟机内存超出了系统能给你的，系统不能满足需求，于是产生溢出。

内存泄漏是指你向系统申请分配内存进行使用(new)，可是使用完了以后却不归还(delete)，结果你申请到的那块内存你自己也不能再访问,该块已分配出来的内存也无法再使用，随着服务器内存的不断消耗，而无法使用的内存越来越多，系统也不能再次将它分配给需要的程序，产生泄露。一直下去，程序也逐渐无内存使用，就会溢出。

第二部分原理

JAVA垃圾回收及对内存区划分

在Java虚拟机规范中，提及了如下几种类型的内存空间：

◇ 栈内存（Stack）：每个线程私有的。

◇ 堆内存（Heap）：所有线程公用的。

◇ 方法区（Method Area）：有点像以前常说的“进程代码段”，这里面存放了每个加载类的反射信息、类函数的代码、编译时常量等信息。

◇ 原生方法栈（Native Method Stack）：主要用于JNI中的原生代码，平时很少涉及。

而Java的使用的是堆内存，java堆是一个运行时数据区，类的实例(对象)从中分配空间。Java虚拟机(JVM)的堆中储存着正在运行的应用程序所建立的所有对象，“垃圾回收”也是主要是和堆内存（Heap）有关。

垃圾回收的概念就是JAVA虚拟机（JVM）回收那些不再被引用的对象内存的过程。一般我们认为正在被引用的对象状态为“alive”,而没有被应用或者取不到引用属性的对象状态为“dead”。垃圾回收是一个释放处于”dead”状态的对象的内存的过程。而垃圾回收的规则和算法被动态的作用于应用运行当中，自动回收。

JVM的垃圾回收器采用的是一种分代（generational ）回收策略，用较高的频率对年轻的对象(young generation)进行扫描和回收，这种叫做minor collection，而对老对象(old generation)的检查回收频率要低很多，称为major collection。这样就不需要每次GC都将内存中所有对象都检查一遍，这种策略有利于实时观察和回收。

（Sun JVM 1.3 有两种最基本的内存收集方式：一种称为copying或scavenge，将所有仍然生存的对象搬到另外一块内存后，整块内存就可回收。这种方法有效率，但需要有一定的空闲内存，拷贝也有开销。这种方法用于minor collection。另外一种称为mark-compact，将活着的对象标记出来，然后搬迁到一起连成大块的内存，其他内存就可以回收了。这种方法不需要占用额外的空间，但速度相对慢一些。这种方法用于major collection. ）

一些对象被创建出来只是拥有短暂的生命周期，比如 iterators 和本地变量。

另外一些对象被创建是拥有很长的生命周期，比如高持久化对象等。

垃圾回收器的分代策略是把内存区划分为几个代，然后为每个代分配一到多个内存区块。当其中一个代用完了分配给他的内存后，JVM会在分配的内存区内执行一个局部的GC（也可以叫minor collection）操作，为了回收处于“dead”状态的对象所占用的内存。局部GC通常要不Full GC要快很多。

JVM定义了两个代，年轻代（yong generation）（有时称为“nursery”托儿所）和老年代(old generation)。年轻代包括 “Eden space（伊甸园）”和两个“survivor spaces”。虚拟内存初始化的时候会把所有对象都分配到 Eden space，并且大部分对象也会在该区域被释放。当进行 minor GC的时候，VM会把剩下的没有释放的对象从Eden space移动到其中一个survivor spaces当中。此外，VM也会把那些长期存活在survivor spaces 里的对象移动到老生代的“tenured” space中。当 tenured generation 被填满后，就会产生Full GC，Full GC会相对比较慢因为回收的内容包括了所有的 live状态的对象。pemanet generation这个代包括了所有java虚拟机自身使用的相对比较稳定的数据对象，比如类和对象方法等。

关于代的划分，可以从下图中获得一个概况：

JVM

如果垃圾回收器影响了系统的性能，或者成为系统的瓶颈，你可以通过自定义各个代的大小来优化它的性能。使用JConsole，可以方便的查看到当前应用所配置的垃圾回收器的各个参数。想要获得更详细的参数，可以参考以下调优介绍：

Tuning Garbage collection with the 5.0 HotSpot VM

http://java.sun.com/docs/hotspot/gc/index.html

最后，总结一下各区内存：

Eden Space (heap)：内存最初从这个线程池分配给大部分对象。

Survivor Space (heap)：用于保存在eden space内存池中经过垃圾回收后没有被回收的对象。

Tenured Generation (heap)：用于保持已经在 survivor space内存池中存在了一段时间的对象。

Permanent Generation (non-heap): 保存虚拟机自己的静态(refective)数据，例如类（class）和方法（method）对象。Java虚拟机共享这些类数据。这个区域被分割为只读的和只写的，

Code Cache (non-heap):HotSpot Java虚拟机包括一个用于编译和保存本地代码（native code）的内存，叫做“代码缓存区”（code cache）

第三部分监控（工具发现问题）

谈到内存监控工具，JConsole是必须要介绍的，它是一个用JAVA写的GUI程序，用来监控VM，并可监控远程的VM，易用且功能强大。具体可监控JAVA内存、JAVA CPU使用率、线程执行情况、加载类概况等，Jconsole需要在JVM参数中配置端口才能使用。

由于是GUI程序，界面可视化，这里就不做详细介绍，

具体帮助支持文档请参阅性能测试JConsole使用方法总结：

http://www.taobao.ali.com/chanpin/km/test/DocLib/性能测试辅助工具－JConsole的使用方法.aspx

或者参考SUN官网的技术文档：

http://Java.sun.com/j2se/1.5.0/docs/guide/management/jconsole.html

http://Java.sun.com/javase/6/docs/technotes/tools/share/jconsole.html

在实际测试某一个项目时，内存出现泄露现象。起初在性能测试的1个小时中，并不明显，而在稳定性测试的时候才发现，应用的HSF调用在经过几个小时运行后，就出现性能明显下降的情况。在服务日志中报大量HSF超时，但所调用系统没有任何超时日志，并且压力应用的load都很低。经过查看日志后，认为应用可能存在内存泄漏。通过jconsole 以及 jmap 工具进行分析发现，确实存在内存泄漏问题，其中PS Old Gen最终达到占用 100%的占用。如图所示：

内存泄露

从上图可以看到，虽然每次Full GC，JVM内存会有部分回收，但回收并不彻底，不可回收的内存对象会越来越多，这样便会出现以上的一个趋势。在Full GC无法回收的对象越来越多时，最终已使用内存达到系统分配的内存最大值，系统最后无内存可分配，最终down机。

第四部分分析

经过开发和架构师对应用的分析，查看此时内存队列，看哪个对象占用数据最多，再利用jmap命令，对线程数据分析，如下所示：

num #instances #bytes class name

———————————————-

1: 9248056 665860032 com.taobao.matrix.mc.domain.**

2: 9248031 295936992 com.taobao.matrix.**

3: 9248068 147969088 java.util.**

4: 1542111 37010664 java.util.Date

前三个instances不断增加，指代的是同一个代码逻辑，异步分发的问题，堵塞消息，回收多次都无法回收成功。导致内存溢出。

此外，对应用的性能单独做了压测，他的性能只能支撑到一半左右，故发送消息的TPS，应用肯定无法处理过来，导致消息堆积，而JAVA垃圾回收期认为这些都是有用的对象，导致内存堆积，直至系统崩溃。

调优方法

由于具体调优方法涉及到应用的配置信息，故在此暂不列出，可以参考性能测试小组发布的《性能测试调优宝典》

第四部分总结

内存溢出主要是由于代码编写时对某些方法、类应用不合理，或者没有预估到临时对象会占用很大内存量，或者把过多的数据放入JVM缓存，或者性能压力大导致消息堆积而占用内存，以至于在性能测试时，生成庞大数量的临时对象，GC时没有做出有效回收甚至根本就不能回收，造成内存空间不足，内存溢出。

如果编码之前，对内存使用量进行预估，对放在内存中的数据进行评估，保证有用的信息尽快释放，无用的信息能够被GC回收，这样在一定程度上是可以避免内存溢出问题的。

http://blog.csdn.net/hengyunabc/article/details/24924843

JVM GC调优一则--增大Eden Space提高性能

缘起

线上有Tomcat升级到7.0.52版，然后有应用的JVM FullGC变频繁，在高峰期socket连接数，Cpu使用率都暴增。

思路

思路是Tomcat本身的代码应该是没有问题的，有问题的可能是应用代码升级，或者环境改变了，总之Tomcat的优先级排在最后。

先把应用的heap dump下来分析下：

jmap -dump:format=b,file=path pid

用IBM的Heap Analyser分析，发现dubbo rpc调用的RpcInvocation对象和taglibs的SimpleForEachIterator对象占用了很大部分内存。

正常来说，这两种类型的对象都应该可以很快被回收掉，怎么会占用了那么大的内存空间？是不是有别的对象引用了它们，导致不能释放？

再仔细分析，发现RpcInvocation对象都是root refer的，也就是根对象，正常来说根对象应该可以很快就被回收掉的，为什么在内存中会有那么多对象？

再查看应用的JVM参数：

[plain] view plain copy

-Xms2g -Xmx2g -Xmn256m -XX:SurvivorRatio=8 -XX:ParallelGCThreads=8 -XX:PermSize=512m -XX:MaxPermSize=512m -Xss256k -XX:-DisableExplicitGC -XX:+UseCompressedOops -XX:+UseConcMarkSweepGC -XX:+CMSParallelRemarkEnabled

首先发现应用的新生代，即-Xmn256m 设置得太小了。对照上面RpcInvocation对象占用了226M，SimpleForEachIterator占用了267M内存。

显然在新生代里，没办法放下那么多的对象，这些对象必然是被放到老生代（old space）里去了。

既然RpcInvocation对象和SimpleForEachIterator对象应该都是可以很快被回收了，那么思路变成，触发一下线上的FullGC，看下对象有没有被回收。

在触发之前，先用jmap -histo pid统计下对象的数量：
34: 136762 4376384 com.alibaba.dubbo.rpc.RpcInvocation
129: 16345 392280 org.apache.taglibs.standard.tag.common.core.ForEachSupport$SimpleForEachIterator
用 jmap -histo:live <pid> 触发Full GC之后：
294: 625 20000 com.alibaba.dubbo.rpc.RpcInvocation
495: 292 7008 org.apache.taglibs.standard.tag.common.core.ForEachSupport$SimpleForEachIterator
果然数量大大的减少了。

所以结论比较明显了，新生代（Young generation）的空间太小，导致有一些本应该可以很快就被回收的对象被放到了老生代（Old generation）里，导致老生代上涨很快，频繁Full GC。

于是想办法增加新生代的大小，把JVM参数改为：

[plain] view plain copy

-Xms2g -Xmx2g -XX:ParallelGCThreads=8 -XX:PermSize=256m -XX:MaxPermSize=512m -Xss256k -XX:-DisableExplicitGC -XX:+UseCompressedOops -XX:+UseConcMarkSweepGC -XX:+CMSParallelRemarkEnabled

因为观察到PermSize实际上只用了不到200M，没有必要设置为512M，浪费内存，所以改为 -XX:PermSize=256m -XX:MaxPermSize=512m 。

另外，把新生代最大限制-Xmn256m 去掉。因为默认的NewRatio = 2，即除了PermSize，新生代大约占内存的1/3，即约(2048 - 256) /3 = 597M。和原来相比增大了一倍不止。

修改上线之后，观察发现Old Space增长缓慢，FullGC次数大大减少，时间在50ms下，Yong GC都在10ms下，达到了想要的效果。

简单的GC过程分析

首先来看一张GC的模型图，很形象：

简单来说，对于GC，我们了解到这些信息就足够了。

大部分新对象在Eden Space上分配，当Eden Space满了，则要用到Survivor Space来回收。YGC的算法是很快的。

多次YGC之后，还存活的对象就会被移到Old Generation（old space）上，当Old Generation满了的时候，就会FGC，FGC有通常比较慢。

Permanent Space只要你在开始时分配了足够大的空间，那它可以不用管。

我们可以得出一些结论：

合理减少对象进入老生代；
Old Space可能会一直增长，有时没有办法避免不让对象进入Old Space，当然也有一些程序是从来都不执行FGC的；
是不是尽全力防止对象进入老生代？显然不是，有些对象如果长久存在在新生代里，显然加重了YGC的负担，多次YGC之后仍然存活的对象显然应该放到Old Space里。