06_方法区

栈、堆、方法区的交互关系

image-20200916164449831

image-20200916164505074

image-20200916164613255

方法区的理解

  • 方法区看作是一块独立于Java堆的内存空间,在HotSpotJVM中它有一个别名叫做Non-Heap(非堆),目的就是要和堆分开。
  • 方法区(Method Area)与Java堆一样,是各个线程共享的内存区域。
  • 方法区在JVM启动的时候被创建,并且它的实际的物理内存空间中和Java堆区一样都可以是不连续的。
  • 方法区的大小,跟堆空间一样,可以选择固定大小或者可扩展。
  • 方法区的大小决定了系统可以保存多少个类,如果系统定义了太多的类,导致方法区溢出,虚拟机同样会抛出内存溢出错误:java.lang.OutOfMeoryError: PermGen space或者java.lang.OutOfMemoryError: Metaspace
  • 关闭JVM就会释放这个区域的内存

方法区的内部结构

image-20200916173238733

存储内容

它用于存储已被虚拟机加载的类型信息、常量、静态变量、即时编译器编译后的代码缓存等。

image-20200916173331932

类型信息

对每个加载的类型(类class、接口interface、枚举enum、注解annotation),JVM必须在方法区中存储以下类型信息:

  1. 这个类型的完整有效名称
  2. 这个类型直接父类的完整有效名(对于interface或者是java.lang.Object都没有父类)
  3. 这个类型的修饰符(public、abstrace、final的某个子集)
  4. 这个类型直接接口的一个有序列表

域(Field)信息

  • JVM必须在方法区中保存类型的所有域的相关信息以及域的声明顺序。
  • 域的相关信息包含:域名称、域类型、域修饰符(public、private、protected、static、final、volatile、transient的某个子集)

方法(Method)信息

JVM必须保存所有方法的以下信息,同域信息一样包括声明顺序:

  • 方法名称
  • 方法的返回类型(或void)
  • 方法参数的数量和类型(按顺序)
  • 方法的修饰符(public、private、protected、static、final、synchronized、native、abstract的一个子集)
  • 方法的字节码(bytecodes)、操作数栈和局部变量表的大小(abstract和native方法除外)
  • 异常表(abstract和native方法除外)
    • 每个异常处理的开始位置、结束位置、代码处理在程序计数器中的偏移地址、被捕获的异常类的引用

运行时常量池VS常量池

方法区中的运行时常量池和字节码文件中的常量池是不同的。

字节码文件的常量池

image-20200916180016967

一个有效的字节码文件中除了包含类的版本信息、字段、方法以及接口等描述信息外,还包含一项信息那就是常量池表(Constant Pool Table),包含各种字面量(右值)和对类型、域和方法的符号(左值)引用。

字节码文件中为什么需要常量池
  1. 配合构建字节码文件的自描述能力
  2. 压缩字节码文件大小(符号引用不会替换成其指向的字节码内容、使用二进制位进行描述)

运行时常量池

  • 运行时常量池(Runtime Constant Pool)是方法区的一部分。
  • 常量池表(Constant Pool Table)是Class文件的一部分,用于存放编译期生成的各种字面量与符号引用,这部分内容将在类加载后存放到方法区的运行时常量池中。
  • 运行时常量池在加载类和接口到虚拟机后,就会创建。
  • JVM为每个已加载的类型(类或接口)都维护一个常量池。池中的数据项像数组一样,是通过索引访问的。
  • 运行时常量池中包含多种不同的常量,包含编译期就已经明确的数值字面量,也包括到运行期解析后才能够获得的方法或者字段引用。此时不再是常量池中的符号引用了,已经替换为真实的直接引用。
  • 当创建类或接口的运行时常量池时,如果构造运行时常量池所需的内存空间超过了方法区所能提供的最大值,则JVM就会抛出OutOfMemoryError
运行时常量池中的"常量"

运行时常量池之中主要存放的两大类常量:字面量和符号引用。

字面量比较接近Java语言层次的常量概念,如文本字符串、被声明为final的常量值等;而符号引用则属于编译原理方面的概念,包含下面三类常量:

  1. 类和接口的全限定名
  2. 字段的名称和描述符
  3. 方法的名称和描述符
补充:non-final的类变量和final修饰的类变量
  • 非final静态变量和类关联在一起,随着类的加载而加载,它们成为类数据在逻辑上的一部分。类变量被类的所有实例共享,即使没有类实例时你也可以访问它

image-20200916174431865

  • 被声明为final的类变量和非final类变量初始化时机不同。。

方法区的演进细节

占用内存位置调整

在JDK7及之前,习惯上把方法区,称为永久代。JDK8开始,使用元空间取代了永久代。

本质上,方法区和永久代并不等价,仅是因为Hotspot JVM中垃圾收集器将方法区定义为永久代。《Java虚拟机规范》对如何实现方法区,不做统一要求。例如:BEA JRockit/IBM J9中不存在永久代的概念。

现在看来,当年使用永久代,不是好的idea。导致Java程序更容易OOM(超过-XX:MaxpermSize上限)。

image-20200916170345428

而到了JDK8,终于完全废弃了永久代的概念,该用与JRockit、J9一样在本地内存中实现的元空间(Metaspace)来代替

image-20200916170454628

元空间的本质和永久代类似,都是对JVM规范中方法区的实现。不过元空间与永久代最大的区别在于:元空间不在虚拟机控制的内存中,而是使用本地内存。

永久代、元空间二者并不只是名字变了,内存结构也调整了。

根据《Java虚拟机规范》的规定,如果方法区无法满足新的内存分配需求时,将抛出OOM异常

存储内容变化

  1. 首先明确,只有HotSpot才有永久代。BEA JRockit、IBM J9等不存在永久代的概念。

  2. Hotspot中方法区的变化:

    版本 说明
    JDK1.6及之前 有永久代(permanent generation),静态(类)变量放在永久代上
    JDK1.7 有永久代,但已经逐步"去永久代",字符串常量池、静态(类)变量移到在堆中,永久代其它信息不变
    JDK1.8及之后 无永久代,类型信息、字段、方法、常量(JDK1.6运行时常量池中除字符串常量之外的其它常量)保存在本地内存的元空间,但字符串常量池、静态(类)变量仍在堆

image-20200916183025199

image-20200916183040354

image-20200916183124256

关于静态(类)变量需要注意的点

上面提到静态变量在JDK1.6及之前都是在永久代,在7及之后才移到堆(老年代)中。以下特别说明一个情况:

加上-XX:+PrintGCDetails分别在JDK6、JDK7、JDK8运行下面这段代码,在程序退出之后会打印退出的时候各分代信息,发现无论是6、7还是8,始终是老年代的内存占用102400K的字节,说明这个字节数组无论是在6,7还是8都落在了堆的老年代中(应该是size太大,直接进入老年代)。

image-20200916205847835

JDK7和8都将静态变量移到了堆,这个可以理解,但是为什么在JDK6中静态变量也是这样呢?因为目前为止无论是任何版本,对象的创建都是保存在堆中(栈上分配也没有实现对象分配,而是标量替换后进行分配),我们讲的静态常量指的是它保存的一个引用,即该数组对象的地址在JDK6中保存在永久代的,而无论在任何版本,该数组对象本身的数据内容都是存放在堆中。而7及之后则是将该静态变量放到了java.lang.Class对象中进行保存,该对象也是在堆中。所以现在的结构就是:

方法区类元信息-------引用-------->java.lang.class-------包含-------->静态变量-------引用-------->数组对象

而6及之前的结构应该是:

方法区类元信息(包含静态变量)-------引用-------->java.lang.class

​ |-------引用-------->数组对象

除了方法区元信息之后,其它数据都在堆区,其中方法区类元信息也是GC Root。

下面例子再次进行说明:

image-20200916203914505

可以使用JHSDB工具分析上面带面执行过程staticObjinstanceObjlocalObj三个静态、实例、方法局部变量涉及的内存分布。

image-20200916203843641

staticObj随着Test的类型信息存放在方法区,instanceObj随着Test的对象实例存放在Java堆,localObj则是存放在foo()方法栈帧的局部变量表中。经过工具分析得到以下结果:

image-20200916204326241

三个对象的数据都落在Eden区范围内(且是递增的),(所以结论:只要是对象实例必然会在Java堆中分配。)接着,找到了一个引用该staticObj对象的地方,是在一个java.lang.Class的实例里,并且java.lang.Class类型的对象实例,里面有一个名为staticObj的实例字段:

image-20200916204746680

从《Java虚拟机规范》所定义的概念模型来看,所有Class相关的信息都应该存放在方法区之中,但方法区该如何实现,《Java虚拟机规范》并未做出规定,这就成了一件允许不同虚拟机自己灵活把握的事情。JDK7及其以后版本的HotSpot虚拟机选择把静态变量与描述类型的Java语言Class对象放在一起,存储于Java堆中。

永久代为什么要被元空间替代

  • 随着Java8的到来,HotSpot VM中再也见不到永久代了。但是这并不意味着类的元数据信息也消息了。这些数据被移到了一个与堆不相连的本地内存区域,这个区域叫做元空间(Metaspace)。

  • 由于类的元数据分配在本地内存中,元空间的最大可分配空间就是系统可用内存空间。

  • 这项改动是很有必要的,原因有:

    1. 为永久代设置空间大小是很难确定的

      在某些场景下,如果动态加载类过多,容易产生Perm区的OOM。比如某个实际Web工程中,因为功能点比较多,在运行过程中,要不断动态加载很多类,经常出现致命错误。

      image-20200916183640560

      而元空间和永久代之间最大区别在于:元空间并不在虚拟机中,而是使用本地内存。因此,默认情况下,元空间的大小仅受本地内存限制。

    2. 对永久代进行调优是很困难的

设置方法区大小与OOm

  • 方法区的大小不必是固定的,JVM可以根据应用的需要动态调整。

  • JDK7及之前:

    • 通过-XX:PermSize=<N>来设置永久代初始分配空间。默认值是20.75M。

    • -XX:MaxPermSize来设定永久代最大可分配空间。32位及其默认是64M,64位及其默认是82M。

    • 当JVM加载的类信息容量超过了这个值,会报异常OutOfMemoryError:PermGem space

      image-20200916171545341

  • JDK8及之后:

    • 元数据区大小可以使用参数-XX:MetaspaceSize-XX:MaxMetaspaceSize指定,替代上述原有的两个参数。
    • 默认指依赖于平台。Windows下,-XX:MetaspaceSize是21M,-XX:MaxMetaspaceSize的值是-1,即没有限制。
    • 与永久代不同,如果不指定大小,默认情况下,虚拟机会耗尽所有的可用系统内存。如果元数据区发生溢出,虚拟机一样会抛出异常OutOfMemoryError: Mataspace
    • -XX:MetaspaceSize:<N>设置初始的元空间大小。对于一个64位的服务端JVM来说,其默认值位21MB。这就是初始的高水位线,一旦触及这个水位线,Full GC将会触发并卸载没用的类(即这些类对应的类加载器不再存活),然后这个高水位线将会重置。新的高水位线的值取决于GC后释放了多少元空间。如果释放的空间不足,那么在不超过MaxMetaspaceSize时,适当提高该值。如果释放空间过多,则适当降低该值。
    • 如果初始化的高水位线设置过低,上述高水位线调整情况会发生很多次。通过垃圾回收器的日志可以观察到Full GC多次调用。为了避免频繁的GC,建议将-XX:MetaspaceSize设置为一个相对较高的值。

OOM例子

image-20200916172507704

image-20200916172530703

如何解决这些OOM

  1. 要解决OOM异常,一般的手段是首先通过内存映象分析工具对dump出来的堆转存快照进行分析,终点是确认内存中的对象是否是必要的,也就是先分清楚是不是内存泄露(Memory Leak)导致的内存溢出(Memory Overflow)。
  2. 如果是内存泄露,可进一步通过工具查看泄露对象到GC Roots的引用链。于是就能找到泄露对象是通过怎样的路径与GC Roots相关联并导致垃圾收集器无法自动回收它们的。掌握了泄露对象的类型信息,以及GC Roots引用链信息,就可以比较准确地定位出泄露代码的位置。
  3. 如果不存在内存泄露,换句话说就是内存中的对象确实都还必须存活着,那就应当检查虚拟机的堆参数(-Xmx-Xms),与机器物理内存对比看是否还可以调大,从代码上检查是否存在某些对象生命周期过长、持有状态时间过长的情况,尝试减少程序运行期的内存消耗。

方法区的垃圾回收

《Java虚拟机规范》对方法区的约束非常宽松,提到过可以不要求虚拟机在方法区中实现垃圾收集。事实上也确实有未实现或未能完整实现方法区类型卸载的收集器存在(如JDK11时期的ZGC收集器就不支持类卸载)

一般来说这个区域的回收效果比较难令人满意,尤其是类型的卸载,条件相当苛刻。但是这部分区域的回收有时又确实是必要的。以前Sun公司的Bug列表中,曾出现过的若干个严重的Bug就是由于低版本的HotSpot虚拟机对此区域未完全回收而导致内存泄露。

方法区的垃圾收集主要回收两部分内容:常量池中废弃的常量和不再使用的类型。HotSpot虚拟机对常量池的回收策略是很明确的,只要常量池中的常量没有被任何地方引用,就可以被回收。回收废弃常量与回收Java堆中的对象非常类似。

判定一个常量是否"废弃"还是相对简单,而要判定一个类型是否属于"不再被使用的类"的条件就比较苛刻了。需要同时满足下面三个条件:

  • 该类所有的实例都已经被回收,也就是Java堆中不存在该类及其任何派生子类的实例。
  • 加载该类的类加载器已经被回收,这个条件除非是经过精心设计的可替换类加载器的场景,如OSGi、JSP的重加载等,否则通常是很难达成的。
  • 该类对应的java.lang.Class对象(在堆中)没有在任何地方被引用,无法在任何地方通过反射访问该类的方法

Java虚拟机被允许对满足上述三个条件的无用类进行回收,这里说的仅仅是“被允许”,而并不是和对象一样,没有引用了就必然会回收。关于是否要对类型进行回收,HotSpot虚拟机提供了- Xnoclassgc参数进行控制,还可以使用-verbose:class以及-XX:+TraceClassLoading-XX: +TraceClassUnLoading查看类加载和卸载信息,其中-verbose:class和-XX:+TraceClassLoading可以在Product版的虚拟机中使用,-XX:+TraceClassUnLoading参数需要FastDebug版的虚拟机支持。
在大量使用反射、动态代理、CGLib等字节码框架,动态生成JSP以及OSGi这类频繁自定义类加载器的场景中,通常都需要Java虚拟机具备类型卸载的能力,以保证不会对方法区造成过大的内存压力。

StringTable为什么要调整

JDK7中将StringTable(字符串常量池)放到了堆空间中,因为永久代的回收效率很低,所以只有在Full GC的时候才会触发。而Full GC是老年代的空间不足、永久代不足时才会触发。这就导致StringTable回收频率不高。而我们开发中会有大量的字符串被创建,将其移到堆中划分老年代是为了提高回收频率。


   转载规则


《06_方法区》 阿钟 采用 知识共享署名 4.0 国际许可协议 进行许可。
  目录