一、堆的核心概述

一、堆的核心概述

• 一个JVM家例只存在一个堆内存,堆也是Java内存管理的核心区域。
• Java堆区在JVM启动的时候即被创建,其空间大小也就确定了。是JVM管理的最大一块内存空间。
• 堆内存的大小是可以调节的。《Java虚拟机规范》规定,堆可以处于物理上不连续的内存空间中,但在逻辑上它应该被视为连续的。
• 所有的线程共享Java堆,在这里还可以划分线程私有的缓冲区(ThreadLocal Allocation Buffer, TLAB)
• Java虚拟机规范》中对Java堆的描述是:所有的对象实例以及数组都应当在运行时分配在堆上。(The heap is the run-time data area fromwhich memory for all class instances and arrays is allocated）
  我要说的是: “几乎”所有的对象实例都在这里分配内存。一从实际使用角度看的。
• 数组和对象可能永远不会存储在栈上,因为栈帧中保存引用,这个引用指向对象或者数组在堆中的位置。
• 在方法结束后,堆中的对象不会马上被移除,仅仅在垃圾收集的时候才会被移除。
• 堆,是GC ( Garbage Collection,垃圾收集器)执行垃圾回收的重点区域。

二、堆的核心概述：内存细分

三、堆空间内部结构（JDK7）

四、堆的内部结构（JDK8）

二、设置堆内存大小与OOM

举例：

三、年轻代与老年代

1. 存储在JVM中的Java对象可以被划分为两类：

• 一类是生命周期较短的瞬时对象,这类对象的创建和消亡都非常迅速
• 另外一类对象的生命周期却非常长,在某些极端的情况下还能够与JVM的生命周期保持一致。

2. Java堆区进一步细分的话,可以划分为年轻代(YoungGen)和老年代(0ldGen)

3. 其中年轻代又可以划分为Eden空间、Survivor0空间和Survivor1空间(有时也叫做from区、to区）

   
   
   

• 在HotSpot中, Eden空间和另外两个Survivor空间缺省所占的比例是8:1:1
• 当然开发人员可以通过选项"-Xx: SurvivorRatio"调整这个空间比例。比如-XX: SurvivorRatio=8
• 几乎所有的Java对象都是在Eden区被new出来的。
• 绝大部分的Java对象的销毁都在新生代进行了。
  IBM公司的专门研究表明,新生代中80%的对象都是“朝生夕死”的。

• 可以使用选项"-Xmn"设置新生代最大内存大小
  这个参数一般使用默认值就可以了。

  
  

四、图解对象分配过程

一、对象分配过程概述

为新对象分配内存是一件非常严谨和复杂的任务, JVM的设计者们不仅需要考虑内存如何分配、在哪里分配等问题,并且由于内存分配算法与内存回收算法密切相关,所以还需要考虑GC执行完内存回收后是否会在内存空间中 生内存碎片。

1. new的对象先放伊甸园区。此区有大小限制。
2. 当伊甸园的空间填满时,程序又需要创建对象, JVM的垃圾回收器将对伊甸园区进行垃圾回收(Minor GC) ,将伊甸园区中的不再被其他对象所引用的对象进行销毁。再加载新的对象放到伊甸园区
3. 然后将伊甸园中的剩余对象移动到幸存者0区。
4. 如果再次触发垃圾回收,此时上次幸存下来的放到幸存者0区的,如果没有回收,就会1放到幸存者1区。
5. 如果再次经历垃圾回收,此时会重新放回幸存者0区,接着再去幸存者1区。
6. 啥时候能去养老区呢?可以设置次数。默认是15次。可以设置参数:-XX:MaxTenuringThreshold-<N>进行设置。
7. 在养老区,相对悠闲。当养老区内存不足时,再次触发GC: Major Gc,进行养老区的内存清理。

8. 若养老区执行了Major GC之后发现依然无法进行对象的保存,就会产生o0M异常java.lang.OutofMemoryError: Java heap space

   
   
   

   总结：

针对幸存者s0,s1区的总结:复制之后有交换,谁空谁是to.关于垃圾回收:频繁在新生区收集,很少在养老区收集,几乎不在永久区/元空间收集。

2、常用调优工具

• JDK命令行
• Eclipse: Memory Analyzer Tool
• Jconsole
• VisualVM
• Jprofiler
• Java Flight Recorder
• GCViewer
• GC Easy

五、MinorGC、MajorGC、FullGC

JVM在进行GC时,并非每次都对上面三个内存(新生代、老年代;方法区)区域一起回收的,大部分时候回收的都是指新生代。

针对HotSpot VM的实现,它里面的GC按照回收区域又分为两大种类型:一种是部分收集(Partial GC) ,一种是整堆收集(Full GC)

1. 部分收集:不是完整收集整个Java堆的垃圾收集。其中又分为:
   新生代收集(Minor Gc / Young GC) ：只是新生代的垃圾收集
   老年代收集(Major GC / old GC) ：只是老年代的垃圾收集。
   目前,只有CMS GC会有单独收集老年代的行为。
   注意,很多时候Major GC会和Full GC混淆使用,需要具体分辨是老年代回收还是整堆回收。
   混合收集(Mixed GC)：收集整个新生代以及部分老年代的垃圾收集。
   目前,只有G1 GC会有这种行为
2. 整堆收集(Ful1 GC)：收集整个java堆和方法区的垃圾收集。

一、最简单的分代式GC策略的触发条件

1. 年轻代GC(Minor GC)触发机制：

• 当年轻代空间不足时,就会触发Minor GC,这里的年轻代满指的是Eden代满, survivor满不会引发GC.(每次Minor GC会清理年轻代的内存。
• 因为Java对象大多都具备朝生夕灭的特性,所以Minor GC非常频繁,一般回收速度也比较快。这一定义既清晰又易于理解。

• Minor GC会引发STW,暂停其它用户的线程,等垃圾回收结束,用户线程才恢复运行。

  
  

2. 老年代GC (Major GC/Fulll GC)触发机制：

• 指发生在老年代的GC,对象从老年代消失时,我们说"Major Gc"或"Full GC"发生了
• 出现了Major GC,经常会伴随至少一次的Minor GC (但非绝对的,在ParallelScavenge收集器的收集策略里就有直接进行Major GC的策略选择过程)。
  也就是在老年代空间不足时,会先尝试触发Minor Gc。如果之后空间还不足,则触发Major GC
• Major GC的速度一般会比Minor GC慢10倍以上, STW的时间更长
• 如果Major Gc后,内存还不足,就报00M了

3. Full GC触发机制：
   触发Full GC执行的情况有如下五种:

• 调用System.gc()时,系统建议执行Full Gc,但是不必然执行
• 老年代空间不足
• 方法区空间不足
• 通过Minor GC后进入老年代的平均大小大于老年代的可用内存
• 由Eden区、survivor space0 (From Space)区向survivor space1 (ToSpace)区复制时,对象大小大于To Space可用内存,则把该对象转存到老年代,且老年代的可用内存小于该对象大小
  说明：full gc是开发或调优中尽量要避免的。这样暂时时间会短一些。

六、堆空间分代思想

为什么需要把Jaya堆分代?不分代就不能正常工作了吗?

经研究,不同对象的生命周期不同。70%-99%的对象是临时对象。

• 新生代:有Eden、两块大小相同的Survivor (又称为from/to, s0/s1)构成,to总为空。

• 老年代：存放新生代中经历多次GC仍然存活的对象。

  
  

为什么需要把Java堆分代？不分代就不能正常工作了吗?

其实不分代完全可以,分代的唯一理由就是优化GC性能。如果没有分代,那所有的对象都在一块,就如同把一个学校的人都关在一个教室。GC的时候要找到哪些对象没用,这样就会对堆的所有区域进行扫描。而很多对象都是朝生夕死的,如果分代的话,把新创建的对象放到某一地方,当GC的时候先把这块存储“朝生夕死”对象的区域进行回收,这样就会腾出很大的空间出来。

七、内存分配策略

八、为对象分配内存：TLAB

一、对象分配过程：TABLE

为什么有TLAB (Thread Local Allocation Buffer ) ?

• 堆区是线程共享区域,任何线程都可以访问到堆区中的共享数据
• 由于对象实例的创建在JVM中非常频繁,因此在并发环境下从堆区中划分内存空间是线程不安全的
• 为避免多个线程操作同一地址,需要使用加锁等机制,进而影响分配速度。

什么是TLAB？

• 从内存模型而不是垃圾收集的角度,对Eden区域继续进行划分, JVM为每个线程分配了一个私有缓存区域,它包含在Eden空间内。
• 多线程同时分配内存时,使用TLAB可以避免一系列的非线程安全问题,同时还能够提升内存分配的吞吐量,因此我们可以将这种内存分配方式称之为快速分配策略。
• 据我所知所有OpenJDK衍生出来的JVM都提供了TLAB的设计。

TLAB的再说明：

• 尽管不是所有的对象实例都能够在TLAB中成功分配内存,但JVM确实是将TLAB作为内存分配的首选。
• 在程序中,开发人员可以通过选项"-xx:UseTLAB"设置是否开启TLAB空间。
• 默认情况下, TLAB空间的内存非常小,仅占有整个Eden空间的18,当然我们可以通过选项"-Xx: TLABWasteTargetPercent"设置TLAB空间所占用Eden空间的百分比大小。
• 一旦对象在TLAB空间分配内存失败时, JVM就会尝试着通过使用加锁机制确保数据操作的原子性,从而直接在Eden空间中分配内存。

九、小结堆空间的参数设置

官网说明:https://docs.oracle.com/javase/8/docs/technotes/tools/unix/java.html

• -XX：+PrintFlagsInitial :查看所有的参数的默认初始值
• -XX：+PrintFlagsFinal :查看所有的参数的最终值(可能会存在修改,不再是初始值)
• -Xms：初始堆空间内存 (默认为物理内存的1/64)
• -Xmx:最大堆空间内存(默认为物理内存的1/4)
• -Xmn:设置新生代的大小。(初始值及最大值)
• -XX: NewRatio:配置新生代与老年代在堆结构的占比
• -XX：SurvivorRatio:设置新生代中Eden和s0/S1空间的比例
• -XX：MaxTenuringThreshold:设置新生代垃圾的最大年龄
• -XX：+PrintGCDetails:输出详细的GC处理日志
  打印gc简要信息: ①-XX:+PrintGC ② -verbose:gc
• -XX：HandlePromotionFailure:是否设置空间分配担保

十、堆是分配对象的唯一选择吗？

在《深入理解Java虚拟机》中关于Java堆内存有这样一段描述：
随着JIT编译期的发展与逃逸分析技术逐渐成熟,栈上分配、标量替换优化技术将会导致一些微妙的变化,所有的对象都分配到堆上也渐渐变得不那么“绝对”了。

在Java虚拟机中,对象是在Java堆中分配内存的,这是一个普遍的常识。但是,有一种特殊情况,那就是如果经过逃逸分析(Escape Analysis)后发现,一个对象并没有逃逸出方法的话,那么就可能被优化成栈上分配。这样就无需在堆上分配内存,也无须进行垃圾回收了。这也是最常见的堆外存储技术。

此外,前面提到的基于openJDK深度定制的TaoBaoVM,其中创新的GCIH (GCinvisible heap)技术实现off-heap,将生命周期较长的Java对象从heap中移至Heap外,并且Gc不能管理GCIH内部的Java对象,以此达到降低GC的回收频率和提升GC的回收效率的目的。

1、逃逸分析概述

• 如何将堆上的对象分配到栈,需要使用逃逸分析手段。
• 这是一种可以有效减少Java程序中同步负载和内存堆分配压力的跨函数全局数据流分析算法。
• 通过逃逸分析, Java Hotspot编译器能够分析出一个新的对象的引用的使用范围从而决定是否要将这个对象分配到堆上。- - 逃逸分析的基本行为就是分析对象动态作用域：
  (1)：当一个对象在方法中被定义后,对象只在方法内部使用,则认为没有发生逃逸。
  (2)：当一个对象在方法中被定义后,它被外部方法所引用,则认为发生逃逸。例如作为调用参数传递到其他地方中。

没有发生逃逸的对象,则可以分配到栈上,随着方法执行的结束,栈空间就被移除。

参数设置:

• 在JDK 6u23版本之后, HotSpot中默认就已经开启了逃逸分析。
• 如果使用的是较早的版本,开发人员则可以通过：
  (1)：选项"-X: +DOEscapeAnalysis"显式开启逃逸分析
  (2)：通过选项"-xx: +PrintEscapeAnalysis"查看逃逸分析的筛选结果。

结论：

开发中能使用局部变量的，就不要使用在方法外定义。

2、逃逸分析：代码优化

使用逃逸分析,编译器可以对代码做如下优化：

1. 栈上分配。将堆分配转化为栈分配。如果一个对象在子程序中被分配,要使指向该对象的指针永远不会逃逸,对象可能是栈分配的候选,而不是堆分配。
2. 同步省略。如果一个对象被发现只能从一个线程被访问到,那么对于这个对象的操作可以不考虑同步。
3. 分离对象或标量替换。有的对象可能不需要作为一个连续的内存结构存在也可以被访问到,那么对象的部分(或全部)可以不存储在内存,而是存储在CPU寄存器中。

• JIT编译器在编译期间根据逃逸分析的结果,发现如果一个对象并没有逃逸出方法的话,就可能被优化成栈上分配。分配完成后,继续在调用栈内执行,1最后线程结束,栈空间被回收,局部变量对象也被回收。这样就无须进行垃圾回收了。

• 常见的栈上分配的场景：
  在逃逸分析中,已经说明了。分别是给成员变量赋值、方法返回值、实例引用传递。

2、代码优化之同步省略（消除）

• 线程同步的代价是相当高的,同步的后果是降低并发性和性能。

• 在动态编译同步块的时候, JIT编译器可以借助逃逸分析来判断同步块所使用的锁对象是否只能够被一个线程访问而没有被发布到其他线程。如果没有,那么JIT编译器在编译这个同步块的时候就会取消对这部分代码的同步。这样就能大大提高并发性和性能。这个取消同步的过程就叫同步省略,也叫锁消除。

3、代码优化之标量替换

标量(Scalar)是指一个无法再分解成更小的数据的数据。Java中的原始数据类型就是标量。

相对的,那些还可以分解的数据叫做聚合量(Aggregate) , Java中的对象就是聚合量,因,为他可以分解成其他聚合量和标量。

在JIT阶段,如果经过逃逸分析,发现一个对象不会被外界访问的话,那么经过J1r优化,就会把这个对象拆解成若干个其中包含的若干个成员变量来代替。这个过程就是标量替换。

以上代码，经过标量替换后，就会变成：

可以看到, Point这个聚合量经过逃逸分析后,发现他并没有逃逸,就被替换成两个聚合量了。那么标量替换有什么好处呢?就是可以大大减少堆内存的占用。因为一旦不需要创建对象了,那么就不再需要分配堆内存了。

标量替换为栈上分配提供了很好的基础。

标量替换参数设置：
参数-xx：+EliminateAllocations：开启了标量替换(默认打开),允许将对象打散分配在栈上。

4. 逃逸分析小结：逃逸分析并不成熟

• 关于逃逸分析的论文在1999年就已经发表了,但直到JDK 1.6才有实现,而且这项技术到如今也并不是十分成熟的。
• 其根本原因就是无法保证逃逸分析的性能消耗一定能高于他的消耗。虽然经过逃逸分析可以做标量替换、栈上分配、和锁消除。但是逃逸分析自身也是需要进行一系列复杂的分析的,这其实也是一个相对耗时的过程。
• 一个极端的例子,就是经过逃逸分析之后,发现没有一个对象是不逃逸的。那这个逃逸分析的过程就白白浪费掉了。
• 虽然这项技术并不十分成熟,但是它也是即时编译器优化技术中一个十分重要的手段。
• 注意到有一些观点,认为通过逃逸分析, JVM会在栈上分配那些不会逃逸的对象,这在理论上是可行的,但是取决于JvM设计者的选择。据我所知, Oracle HotspotJVM中并未这么做,这一点在逃逸分析相关的文档里已经说明,所以可以明确所有的对象实例都是创建在堆上。
• 目前很多书籍还是基于JDK 7以前的版本, JDK已经发生了很大变化, intern字符串的缓存和静态变量曾经都被分配在永久代上,而永久代已经被元数据区取代。但是,intern字符串缓存和静态变量并不是被转移到元数据区,而是直接在堆上分配,所以这一点同样符合前面一点的结论:对象实例都是分配在堆上。
• 年轻代是对象的诞生、成长、消亡的区域,一个对象在这里产生、应用,最后被垃圾回收器收集、结束生命。
• 老年代放置长生命周期的对象,通常都是从survivor区域筛选拷贝过来的Java对象。当然,也有特殊情况,我们知道普通的对象会被分配在TLAB上;如果对象较大, JVM会试图直接分配在Eden其他位置上;如果对象太大,完全无法在新生代找到足够长的连续空闲空间, JVM就会直接分配到老年代。
• 当GC只发生在年轻代中,回收年轻代对象的行为被称为MinorGC。当GC发生在老年代时则被称为MajorGC或者Ful1GC,一般的, MinorGc的发生频率要比MajorGC高很多,即老年代中垃圾回收发生的频率将大大低于年轻代。