66-javajvm-堆:
堆的核心概述
堆与进程、线程
- 一个进程对应一个JVM实例
- 一个JVM实例对应一个堆空间
- 进程包含多个线程,所以线程之间共享同一个堆空间
对堆的认识
- 一个JVM实例只存在一个堆内存,堆也是Java内存管理的核心区域。
- Java堆区在JVM启动的时候即被创建,其空间大小也就确定了,堆是JVM管理的最大一块内存空间。堆内存的大小是可以调节的。
- 《Java虚拟机规范》规定,堆可以处于物理上不连续的内存空间中,但在逻辑上它应该被视为连续的。
- 所有的线程共享Java堆,在这里还可以划分线程私有的缓冲区(Thread Local Allocation Buffer,TLAB)。
- 《Java虚拟机规范》中对Java堆的描述是:所有的对象实例以及数组都应当在运行时分配在堆上。(The heap is the run-time data area from which memory for all class instances and arrays is allocated)
- 从实际使用角度看的:“几乎”所有的对象实例都在这里分配内存。因为还有一些对象是在栈上分配的(逃逸分析,标量替换)
- 数组和对象可能永远不会存储在栈上,因为栈帧中保存引用,这个引用指向对象或者数组在堆中的位置。
- 在方法结束后,堆中的对象不会马上被移除,仅仅在垃圾收集的时候才会被移除。也就是触发了GC的时候,才会进行回收
如果堆中对象马上被回收,那么用户线程就会收到影响,因为有 stop the word - 堆,是GC(Garbage Collection,垃圾收集器)执行垃圾回收的重点区域。
堆内存分区(重要)
现代垃圾收集器大部分都基于分代收集理论设计,堆空间细分为:
Java 7及之前堆内存逻辑上分为三部分:新生区 + 养老区 + 永久区
1、Young Generation Space 新生区 Young/New
2、又被划分为 Eden区 和 Survivor区
3、Tenure generation space 养老区 Old/Tenure
4、Permanent Space永久区 Perm
Java 8及之后堆内存逻辑上分为三部分:新生区 + 养老区 + 元空间
- Young/New Generation Space 新生区,又被划分为Eden区和Survivor区
- Old/Tenure generation space 养老区
- Meta Space 元空间 Meta
-
约定:
新生区 = 新生代 = 年轻代
、养老区 = 老年区 = 老年代
、永久区 = 永久代
-
堆空间内部结构,JDK1.8之前从
永久代
替换成元空间
-
堆空间逻辑上包括
永久代/元空间
,实际上控制不到
设置堆内存大小与OOM
设置堆空间大小
-
Java堆区用于存储Java对象实例,那么堆的大小在JVM启动时就已经设定好了,可以通过"-Xms"和"-Xmx"来进行设置。
-Xms 堆的初始内存,等价于-XX:InitialHeapSize。-Xmx堆的最大内存,等价于 -XX:MaxHeapSize -
一旦堆区中的内存大小超过“-Xmx”所指定的最大内存时,将会抛出OutofMemoryError异常。
-
通常会将-Xms和-Xmx两个参数配置相同的值,其目的是为了能够在Java垃圾回收机制清理完堆区后不需要重新分隔计算堆区的大小,从而提高性能。
-
默认情况下:初始内存大小:物理电脑内存大小/64。最大内存大小:物理电脑内存大小/4
-
分析原因:大对象导致堆内存溢出
[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-YB6y30A1-1669901720443)(png/a737a35c239bcd02fc01d849d5cb4af6.png)]
年轻代与老年代
Java 对象分类
1、存储在JVM中的Java对象可以被划分为两类:
-
一类是生命周期较短的瞬时对象,这类对象的创建和消亡都非常迅速
-
另外一类对象的生命周期却非常长,在某些极端的情况下还能够与JVM的生命周期保持一致
2、Java堆区进一步细分的话,可以划分为年轻代(YoungGen)和老年代(oldGen)
3、其中年轻代又可以划分为Eden空间、Survivor0空间和Survivor1空间(有时也叫做from区、to区)
[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-jfNg60Dv-1669901720444)(png/image-20211127182743803.png)]
配置新生代与老年代的比例
配置新生代与老年代在堆结构的占比(下面这些参数在开发中一般不会调)
- 默认**-XX:NewRatio**=2,表示新生代占1,老年代占2,新生代占整个堆的1/3
- 可以修改**-XX:NewRatio**=4,表示新生代占1,老年代占4,新生代占整个堆的1/5
- 当发现在整个项目中,生命周期长的对象偏多,那么就可以通过调整老年代的大小,来进行调优
[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-Ey7ehKcU-1669901720446)(png/image-20211127182841813.png)]
新生区中的比例
- 在HotSpot中,Eden空间和另外两个survivor空间缺省所占的比例是8 : 1 : 1
- 可以通过选项**-XX:SurvivorRatio**调整这个空间比例。比如-XX:SurvivorRatio=8
- 几乎所有的Java对象都是在Eden区被new出来的。
- 绝大部分的Java对象的销毁都在新生代进行了(有些大的对象在Eden区无法存储时候,将直接进入老年代)
- 可以使用选项"-Xmn"设置新生代最大内存大小,但这个参数一般使用默认值就可以了。
- 新生区的对象默认生命周期超过 15 ,将进入老年代
[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-XNdqqDFN-1669901720446)(png/image-20211127182949986.png)]
通过命令行查看各种比例
查看新生代与老年代的比例 jps jinfo -flag NewRatios 进程id
查看新生区中伊甸园区与幸存者区的比例 jps jinfo -flag SurvivorRatio 进程id
设置 JVM 参数 -Xms600m -Xmx600m -XX:NewRatio=2 -XX:SurvivorRatio=8
新生区中:伊甸园区 : 幸存者 0 区 : 幸存者 1 区 = 8 : 1 : 1 新生区 : 老年区 = 1 : 2
图解对象分配过程
对象分配过程
为新对象分配内存是一件非常严谨和复杂的任务,JVM的设计者们不仅需要考虑内存如何分配、在哪里分配等问题,并且由于内存分配算法与内存回收算法密切相关,所以还需要考虑GC执行完内存回收后是否会在内存空间中产生内存碎片。
- new的对象先放伊甸园区。此区有大小限制。
- 当伊甸园的空间填满时,程序又需要创建对象,JVM的垃圾回收器将对伊甸园区进行垃圾回收(MinorGC),将伊甸园区中的不再被其他对象所引用的对象进行销毁。再加载新的对象放到伊甸园区。
- 然后将伊甸园中的剩余对象移动到幸存者0区。
- 如果再次触发垃圾回收,此时将伊甸园区和幸存者0区进行垃圾回收,剩下的对象就会放到幸存者1区。
- 如果再次经历垃圾回收,此时会重新放回幸存者0区,接着再去幸存者1区。
- 啥时候能去养老区呢?可以设置次数。默认是15次。可以设置新生区进入养老区的年龄限制,设置 JVM 参数:-XX:MaxTenuringThreshold=N 进行设置
- 在养老区,相对悠闲。当养老区内存不足时,再次触发GC:Major GC,进行养老区的内存清理
- 若养老区执行了Major GC之后,发现依然无法进行对象的保存,就会产生OOM异常。
图解对象分配(重要)
- 我们创建的对象,一般都是存放在Eden区的,当我们的Eden区满了后,就会触发GC操作,一般被称为
YGC / Minor GC
操作
[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-jPShCZ7B-1669901720447)(png/image-20211127183526205.png)]
-
当我们进行一次垃圾收集后,红色的对象将会被回收,而绿色的独享还被占用着,存放在S0(Survivor From)区。同时我们给每个对象设置了一个年龄计数器,经过一次回收后还存在的对象,将其年龄加 1。
-
同时Eden区继续存放对象,当Eden区再次存满的时候,又会触发一个MinorGC操作,此时GC将会把 Eden和Survivor From中的对象进行一次垃圾收集,把存活的对象放到 Survivor To区,同时让存活的对象年龄 + 1
[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-hgBG6mI3-1669901720448)(png/image-20211127183601772.png)] -
我们继续不断的进行对象生成和垃圾回收,当Survivor中的对象的年龄达到15的时候,将会触发一次
Promotion 晋升
的操作,也就是将年轻代中的对象晋升到老年代中[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-fSxoWxhO-1669901720448)(png/image-20211127183622753.png)]
HeapInstanceTest06测试,观察图形变化
[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-yA1aMSE8-1669901720449)(png/417dd33a347f9d12f018490ca944996d.gif)]
特殊情况说明
思考:幸存区满了咋办?
-
特别注意,在Eden区满了的时候,才会触发MinorGC,而幸存者区满了后,不会触发MinorGC操作
-
如果Survivor区满了后,将会触发一些特殊的规则,也就是可能直接晋升老年代
对象分配的特殊情况
如果来了一个新对象,先看看 Eden 是否放的下?
-
如果 Eden 放得下,则直接放到 Eden 区
-
如果 Eden 放不下,则触发 YGC ,执行垃圾回收,看看还能不能放下?放得下最好当然最好咯
将对象放到老年区又有两种情况:
-
如果 Eden 执行了 YGC 还是无法放不下该对象,那没得办法,只能说明是超大对象,只能直接怼到老年代
-
那万一老年代都放不下,则先触发重 GC ,再看看能不能放下,放得下最好,但如果还是放不下,那只能报 OOM 啦
如果 Eden 区满了,将对象往幸存区拷贝时,发现幸存区放不下啦,那只能便宜了某些新对象,让他们直接晋升至老年区
[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-s49WP0vQ-1669901720450)(png/image-20211127184132010.png)]
GC垃圾回收器
分代收集思想(面试必问)
Minor GC、Major GC、Full GC
垃圾收集,我们需要尽量的避免垃圾回收,因为在垃圾回收的过程中,容易出现STW(Stop the World)的问题,而 Major GC 和 Full GC出现STW的时间,是Minor GC的10倍以上
JVM在进行GC时,并非每次都对上面三个内存( 新生代、老年代;方法区 )区域一起回收的,大部分时候回收的都是指新生代。针对Hotspot VM的实现,它里面的GC按照回收区域又分为两大种类型:一种是部分收集(Partial GC),一种是整堆收集(FullGC)
1、部分收集:不是完整收集整个Java堆的垃圾收集。其中又分为:
新生代收集( Minor GC/Young GC ):只是新生代( Eden、S0/S1 )的垃圾收集
老年代收集( Major GC/Old GC ):只是老年代的垃圾收集。
目前,只有CMS GC会有单独收集老年代的行为。
注意,很多时候Major GC会和Full GC混淆使用,需要具体分辨是老年代回收还是整堆回收。
混合收集(Mixed GC):收集整个新生代以及部分老年代的垃圾收集。
目前,只有G1 GC会有这种行为
2、整堆收集(Full GC):收集整个java堆和方法区的垃圾收集。
Young/Minor GC
年轻代 GC(Minor GC)触发机制
当年轻代空间不足时,就会触发Minor GC,这里的年轻代满指的是Eden区满,Survivor区满不会触发GC。(每次Minor GC会清理年轻代的内存)
因为Java对象大多都具备朝生夕灭的特性,所以Minor GC非常频繁,一般回收速度也比较快。这一定义既清晰又易于理解。
Minor GC会引发STW,暂停其它用户的线程,等待垃圾回收线程结束,用户线程才恢复运行
[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-FgKvdf31-1669901720450)(png/image-20211127185225675.png)]
Major GC 老年代 GC(MajorGC/Full GC)触发机制
- 指发生在老年代的GC,对象从老年代消失时,我们说 “Major Gc” 或 “Full GC” 发生了
- 出现了MajorGc,经常会伴随至少一次的Minor GC
但非绝对的,在Parallel Scavenge收集器的收集策略里就有直接进行Major GC的策略选择过程
也就是在老年代空间不足时,会先尝试触发Minor GC,如果之后空间还不足,则触发Major GC - Major GC的速度一般会比Minor GC慢10倍以上,STW的时间更长
- 如果Major GC后,内存还不足,就报OOM了
Full GC Full GC 触发机制
触发Full GC执行的情况有如下五种:
-
调用System.gc( )时,系统建议执行Full GC,但是不必然执行
-
老年代空间不足
-
方法区空间不足
-
通过Minor GC后进入老年代的平均大小 大于 老年代的可用内存
-
由Eden区、survivor space0(From Space)区 向survivor space1(To Space)区复制时,对象大小大于To Space可用内存,则把该对象转存到老年代,且老年代的可用内存 小于 该对象大小
说明:Full GC 是开发或调优中尽量要避免的。这样STW时间会短一些
堆空间分配思想 (为了性能,减少stw,减少对没用对象的筛查)
为什么要把Java堆分代?不分代就不能正常工作了吗?
-
经研究,不同对象的生命周期不同。70%-99%的对象是临时对象。
新生代:有Eden、两块大小相同的Survivor(又称为from/to,s0/s1)构成,to总为空。
老年代:存放新生代中经历多次GC之后仍然存活的对象。 -
其实不分代完全可以,分代的唯一理由就是优化GC性能。
若不分代,所有对象都在一块,如同把一个学校的人都关一起。GC的时候要找到哪些对象没用,这样就会对堆的所有区域进行扫描。
而很多对象都是朝生夕死的,如果分代的话,把新创建的对象放到某一地方,当GC的时候先把这块存储“朝生夕死”对象的区域进行回收,这样就会腾出很大的空间出来。
内存分配策略 内存分配策略或对象提升(Promotion)规则
- 如果对象在Eden出生并经过第一次Minor GC后仍然存活,并能被Survivor容纳的话,将被移动到Survivor空间中,并将对象年龄设为1。
- 对象在Survivor区中每熬过一次MinorGC,年龄就增加1岁,当它的年龄增加到一定程度(默认为15岁,其实每个JVM、每个GC都有所不同)时,就会被晋升到老年代。
- 对象晋升老年代的年龄阀值,可以通过选项**-XX:MaxTenuringThreshold**来设置
针对不同年龄段的对象分配原则如下所示:
- 优先分配到Eden
- 大对象直接分配到老年代:尽量避免程序中出现过多的大对象
- 长期存活的对象分配到老年代
- 动态对象年龄判断:
如果Survivor区中相同年龄的所有对象大小的总和 大于 Survivor空间的一半,年龄大于或等于该年龄的对象可以直接进入老年代,无须等到MaxTenuringThreshold中要求的年龄。 - 空间分配担保:
-XX:HandlePromotionFailure ,也就是经过Minor GC后,所有的对象都存活,因为Survivor比较小,所以就需要将Survivor无法容纳的对象,存放到老年代中。
为对象分配内存: TLAB
为什么有 TLAB 问题:堆空间都是共享的么?
不一定,因为还有TLAB这个概念,在堆中划分出一块区域,为每个线程所独占
为什么有TLAB(Thread Local Allocation Buffer)?
-
TLAB:Thread Local Allocation Buffer,也就是为每个线程单独分配了一个缓冲区
-
堆区是线程共享区域,任何线程都可以访问到堆区中的共享数据
-
由于对象实例的创建在JVM中非常频繁,因此在并发环境下从堆区中划分内存空间是线程不安全的
-
为避免多个线程操作同一地址,需要使用加锁等机制,进而影响分配速度。
什么是 TLAB
1、从内存模型而不是垃圾收集的角度,对Eden区域继续进行划分,JVM为每个线程分配了一个私有缓存区域,它包含在Eden空间内。
2、多线程同时分配内存时,使用TLAB可以避免一系列的非线程安全问题,同时还能够提升内存分配的吞吐量,因此我们可以将这种内存分配方式称之为快速分配策略。
3、所有OpenJDK衍生出来的JVM都提供了TLAB的设计。
[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-S05dAQc0-1669901720451)(png/image-20211127191818096.png)]
TLAB 分配过程
- 尽管不是所有的对象实例都能够在TLAB中成功分配内存,但JVM确实是将TLAB作为内存分配的首选。
- 在程序中,开发人员可以通过选项“-XX:UseTLAB”设置是否开启TLAB空间。
- 默认情况下,TLAB空间的内存非常小,仅占有整个Eden空间的1%,当然我们可以通过选项“-XX:TLABWasteTargetPercent”设置TLAB空间所占用Eden空间的百分比大小。
- 一旦对象在TLAB空间分配内存失败,JVM就会尝试着通过使用加锁机制确保数据操作的原子性,从而直接在Eden空间中分配内存。
[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-dHoZBdVD-1669901720451)(png/image-20211127192020994.png)]
堆空间参数设置
官方连接 https://docs.oracle.com/javase/8/docs/technotes/tools/unix/java.html
常用参数设置
-XX:+PrintFlagsInitial:查看所有的参数的默认初始值
-XX:+PrintFlagsFinal:查看所有的参数的最终值(可能会存在修改,不再是初始值)
-Xms:初始堆空间内存(默认为物理内存的1/64)
-Xmx:最大堆空间内存(默认为物理内存的1/4)
-Xmn:设置新生代的大小(初始值及最大值)
-XX:NewRatio:配置新生代与老年代在堆结构的占比
-XX:SurvivorRatio:设置新生代中Eden和S0/S1空间的比例
-XX:MaxTenuringThreshold:设置新生代垃圾的最大年龄
-XX:+PrintGCDetails:输出详细的GC处理日志
-XX:+PrintGC 或 -verbose:gc :打印gc简要信息
-XX:HandlePromotionFalilure:是否设置空间分配担保
空间分配担保 (old连续空间和新生代所有对象总空间比较。大于,minor gc安全,小于,则判断old最大连续可用空间是否大于历史晋升到老年代对象平均的大小。大于,可minor gc 。小于 full gc)
在发生Minor GC之前,虚拟机会检查老年代最大可用的连续空间是否大于新生代所有对象的总空间。
- 如果大于,则此次Minor GC是安全的
- 如果小于,则虚拟机会查看**-XX:HandlePromotionFailure**设置值是否允许担保失败。
- 如果HandlePromotionFailure=true,那么会继续检查老年代最大可用连续空间是否大于历次晋升到老年代的对象的平均大小
如果大于,则尝试进行一次Minor GC,但这次Minor GC依然是有风险的;
如果小于,则进行一次Full GC。 - 如果HandlePromotionFailure=false,则进行一次Full GC。
- 如果HandlePromotionFailure=true,那么会继续检查老年代最大可用连续空间是否大于历次晋升到老年代的对象的平均大小
面试题
堆是分配对象存储的唯一选择吗?
在《深入理解Java虚拟机》中关于Java堆内存有这样一段描述:
随着JIT编译期的发展与逃逸分析技术逐渐成熟,栈上分配、标量替换优化技术将会导致一些微妙的变化,所有的对象都分配到堆上也渐渐变得不那么“绝对”了。
在Java虚拟机中,对象是在Java堆中分配内存的,这是一个普遍的常识。但是,有一种特殊情况,那就是如果经过逃逸分析(Escape Analysis)后发现,一个对象并没有逃逸出方法的话,那么就可能被优化成栈上分配。这样就无需在堆上分配内存,也无须进行垃圾回收了。这也是最常见的堆外存储技术。
此外,前面提到的基于OpenJDK深度定制的TaoBao VM( 淘宝虚拟机 ),其中创新的GCIH(GC invisible heap)技术实现off-heap,将生命周期较长的Java对象从heap中移至heap外,并且GC不能管理GCIH内部的Java对象,以此达到降低GC的回收频率和提升GC的回收效率的目的。
1 逃逸分析 (看对象创建的位置,在方法内外是否使用。紧在方法内部,为逃逸,放在栈中进行分配和销毁)
如何将堆上的对象分配到栈,需要使用逃逸分析手段。
- 这是一种可以有效减少Java程序中同步负载和内存堆分配压力的跨函数全局数据流分析算法。
- 通过逃逸分析,Java Hotspot编译器能够分析出一个新的对象的引用的使用范围从而决定是否要将这个对象分配到堆上。
- 逃逸分析的基本行为就是分析对象动态作用域:
1、当一个对象在方法中被定义后,对象只在方法内部使用,则认为没有发生逃逸。
2、当一个对象在方法中被定义后,它被外部方法所引用,则认为发生逃逸。例如作为调用参数传递到其他地方中。
举例
- 没有发生逃逸的对象,则可以分配到栈上,随着方法执行的结束,栈空间就被移除 案例A11_EscapeAnalysis
public void my_method() {
V v = new V();
// use v
// ....
v = null;
}
逃逸分析之代码优化
使用逃逸分析,编译器可以对代码做如下优化:
-
栈上分配:将堆分配转化为栈分配。如果一个对象在子程序中被分配,要使指向该对象的指针永远不会发生逃逸,对象可能是栈上分配的候选,而不是堆上分配
-
同步省略:如果一个对象被发现只有一个线程被访问到,那么对于这个对象的操作可以不考虑同步。
-
分离对象或标量替换:有的对象可能不需要作为一个连续的内存结构存在也可以被访问到,那么对象的部分(或全部)可以不存储在内存,而是存储在CPU寄存器中。
2 栈上分配 (未逃逸,出栈即销毁,无gc) A12_StackAllocation
- JIT编译器在编译期间根据逃逸分析的结果,发现如果一个对象并没有逃逸出方法的话,就可能被优化成栈上分配。
- 分配完成后,继续在调用栈内执行,最后线程结束,栈空间被回收,局部变量对象也被回收。这样就无须进行垃圾回收了。
- 常见的栈上分配的场景:在逃逸分析中,已经说明了,分别是给成员变量赋值、方法返回值、实例引用传递。
3 同步省略(锁消除) (未逃逸的不牵扯线程共享,安全,不需要同步)
-
线程同步的代价是相当高的,同步的后果是降低并发性和性能。
-
在动态编译同步块的时候,JIT编译器可借助逃逸分析来判断同步块所使用的锁对象是否只被一个线程访问而没有被发布到其他线程。
-
如果没有,那么JIT编译器在编译这个同步块的时候就会取消对这部分代码的同步。这样就能大大提高并发性和性能。这个取消同步的过程就叫同步省略,也叫锁消除。
4 分离对象或标量替换 (未逃逸,将对象分解为标量,提升性能)
参数 -XX:+ElimilnateAllocations:开启了标量替换(默认打开),允许将对象打散分配在栈上。
- 标量(scalar)是指一个无法再分解成更小的数据的数据。Java中的原始数据类型就是标量。
- 相对的,那些还可以分解的数据叫做聚合量(Aggregate),Java中的对象就是聚合量,因为他可以分解成其他聚合量和标量。
- 在JIT阶段,如果经过逃逸分析,发现一个对象不会被外界访问的话,那么经过JIT优化,就会把这个对象拆解成若干个其中包含的若干个成员变量来代替。这个过程就是标量替换。
好处:
- 可以大大减少堆内存的占用。因为一旦不需要创建对象了,那么就不再需要分配堆内存了。
- 标量替换为栈上分配提供了很好的基础。
标量替换举例
public static void main(String args[]) {
alloc();
}
class Point {
private int x;
private int y;
}
private static void alloc() {
Point point = new Point(1,2);
System.out.println("point.x" + point.x + ";point.y" + point.y);
}
以上代码,经过标量替换后,就会变成
private static void alloc() {
int x = 1;
int y = 2;
System.out.println("point.x = " + x + "; point.y=" + y);
}
- 可以大大减少堆内存的占用。因为一旦不需要创建对象了,那么就不再需要分配堆内存了。
- 标量替换为栈上分配提供了很好的基础。
标量替换举例
public static void main(String args[]) {
alloc();
}
class Point {
private int x;
private int y;
}
private static void alloc() {
Point point = new Point(1,2);
System.out.println("point.x" + point.x + ";point.y" + point.y);
}
以上代码,经过标量替换后,就会变成
private static void alloc() {
int x = 1;
int y = 2;
System.out.println("point.x = " + x + "; point.y=" + y);
}