JVM堆内存知识和实践

一、运行时数据区域

Java 虚拟机在执行 Java 程序的过程中会把它管理的内存划分成若干个不同的数据区域。

  1. JDK1.8 运行时数据区的划分,它包括:
    1.1 程序计数器、Java虚拟机栈、本地方法栈
    1.2 堆、元空间、直接内存
JDK1.8 运行时数据区.png
  1. Java运行时内存空间可以分为两种,线程私有和线程共享
    线程私有:Java虚拟机栈、本地方法栈、程序计数器
    线程共享:堆、元空间、直接内存
二、Java堆Heap的结构
Java堆内存概述

Java 虚拟机所管理的内存中最大的一块,Java 堆是所有线程共享的一块内存区域,在虚拟机启动时创建。此内存区域的唯一目的就是存放对象实例,几乎所有的对象实例以及数组都在这里分配内存。

Java 堆是垃圾收集器管理的主要区域,因此也被称作GC 堆(Garbage Collected Heap)。从垃圾回收的角度,由于现在收集器基本都采用分代垃圾收集算法,所以 Java 堆还可以细分为:新生代和老年代:再细致一点有:Eden 空间、From Survivor、To Survivor 空间等。进一步划分的目的是更好地回收内存,或者更快地分配内存。

Java堆的结构

jvm启动conf中配置参数: -XX:NewRatio=4 -XX:SurvivorRatio=2

堆结构.png
  1. 年轻代用来存放新分配的对象,年轻代中经过垃圾回收,没有回收掉的对象,被复制到老年代;
  2. 老年代存储对象比年轻代存储对象的年龄大得多,老年代存储一些大对象;
  3. 整个堆大小 = 年轻代 + 老年代;
  4. 年轻代 = Eden + S0 + S1;
  5. 从 JDK1.8 开始,元空间(MetaSpace)用来存放Class、Method 等元信息的区域,元空间并不在虚拟机里面,而是直接使用本地内存;
Java堆的参数

-Xms:初始化堆大小,默认物理内存的 1/64
-Xmx:最大堆大小,默认物理内存的 1/4
-Xmn:年轻代大小,默认整个堆的 3/8
-XX:+HeapDumpOnOutOfMemoryError:OOM时导出堆到文件
-XX:+HeapDumpPath:导出 OOM 的路径
-XX: NewRatio:老年代与年轻代的比值,如果 xms=xmx,且设置了 xmn 的情况,该参数不用设置
-XX: SurvivorRatio:Eden区和Survivor区的大小比值,设置为8,则两个 Survivor 区与一个Eden区的比值为 2:8,一个 Survivor 占整个新生的 1/10
-XX:OnOutOfMemoryError:在OOM时,执行一个脚本
-Xss:通常只有几百k,决定了函数调用的深度

解释:
-XX:NewRatio=4 设置老年代OldGen和年轻代YongGen比值 4 : 1,OldGen:4/5,YongGen:1/5
-XX:SurvivorRatio=2 设置Eden和Survivor比值 2 : 1,Eden:2/4,S0:1/4,S1:1/4

元空间的参数

-XX:MetaspaceSize:初始空间大小
-XX:MaxMetaspaceSize:最大空间,默认是没有限制的
-XX:MinMetaspaceFreeRatio:在GC之后,最小的Metaspace 剩余空间容量的百分比
-XX:MaxMetaspaceFreeRatio:在GC之后,最大的Metaspace剩余空间容量的百分比

conf文件配置示例:
JAVA_OPTS="-Xms512m -Xmx512m -XX:SurvivorRatio=2 -XX:NewRatio=4 -XX:MetaspaceSize=64m -XX:MaxMetaspaceSize=256m -XX:+HeapDumpOnOutOfMemoryError -XX:HeapDumpPath=/yuanben/dumps/ -XX:+PrintGCDateStamps -XX:+PrintGCDetails -Xloggc:/yuanben/gclog/gclog -Dfile.encoding=UTF-8"

查看各个代的内存配置和使用情况:jmap -heap pid

MaxHeapSize = 512M,OldZize = 410M(512✖️0.8),NewSize = 102M(512✖️0.2) = Eden(51M) + S0(25.5M) + S1(25.5M)

heap.png
垃圾回收
  1. 新生代 = 1 个 Eden 区 + 2 个 Survivor 区(From Survivor, ToSurvivor)
    绝大部分对象在 Eden 区生成,当 Eden 区装填满的时候,会触发 Young Garbage Collection, 即 YGC。

  2. 大部分情况,对象都会首先在 Eden 区域分配,在一次新生代垃圾回收时,没有被引用的对象则直接回收,如果对象还存活,则会进入s1("To"),并且对象的年龄还会加 1(Eden 区->Survivor 区后对象的初始年龄变为 1),当它的年龄增加到一定程度(默认为 15 岁),就会被晋升到老年代中。经过这次GC后,Eden区和"From"区已经被清空。这个时候,"From"和"To"会交换他们的角色,也就是新的"To"就是上次GC前的“From”,新的"From"就是上次GC前的"To"。不管怎样,都会保证名为To的Survivor区域是空的。Minor GC会一直重复这样的过程,直到“To”区被填满,"To"区被填满之后,会将所有对象移动到老年代中。

  3. 堆内存分配策略


    堆内存常见分配策略.png

3.1 对象优先在 eden 区分配
    大多数情况下,对象在新生代中 eden 区分配。当 eden 区没有足够空间进行分配时,虚拟机将发起一次 Minor GC。
    新生代 GC(Minor GC):指发生新生代的的垃圾收集动作,Minor GC 非常频繁,回收速度一般也比较快。
    老年代 GC(Major GC/Full GC):指发生在老年代的 GC,出现了 Major GC 经常会伴随至少一次的 Minor GC(并非绝对),Major GC 的速度一般会比 Minor GC 的慢 10 倍以上。

3.2 大对象直接进入老年代
    大对象就是需要大量连续内存空间的对象(比如:字符串、数组)。

3.3 长期存活的对象将进入老年代
    对象在 Eden 出生并经过第一次 Minor GC 后仍然能够存活,并且能被 Survivor 容纳的话,将被移动到 Survivor 空间中,并将对象年龄设为 1。对象在 Survivor 中每熬过一次 MinorGC,年龄就增加 1岁,当它的年龄增加到一定程度(默认为 15 岁),就会被晋升到老年代中。对象晋升到老年代的年龄阈值,可以通过参数 -XX:MaxTenuringThreshold 来设置。

垃圾收集算法
  1. 标记/清除算法
  2. 复制算法
  3. 标记/整理算法

新生代采用复制算法,老年代采用标记/清除算法或标记/整理算法;
原理:在新生代中,每次垃圾收集时都发现有大批对象死去,只有少量存活,那就选用复制算法,只需要付出少量存活对象的复制成本就可以完成收集。而老年代中因为对象存活率高、没有额外空间对它进行分配担保,就必须使用“标记-清理”或者“标记一整理”算法来进行回收;
JVM这篇文章中使用了图文结合分析了垃圾回收算法原理,比较易懂,推荐

垃圾收集器
  1. Serial 收集器
  2. ParNew 收集器
  3. Parallel Scavenge 收集器
  4. Serial Old 收集器
  5. Parallel Old 收集器
  6. CMS 收集器
  7. G1 收集器
指标解释

jstat -gc 用于显示堆内存和垃圾收集的信息,例如:

  1. S0C、S1C、S0U、S1U:分别展示新生代中第一个(s0)和第二个(s1) Survivor Space 的当前容量(Capacity)和已使用大小(Used);

  2. EC、EU:表示新生代中 Eden Space 的当前容量和已使用大小;

  3. OC、OU:表示老年代空间的当前容量和已使用大小;

  4. YGC、YGT、FGC、FGCT、GCT:分别表示新生代垃圾回收次数、新生代垃圾回收耗时、老年代垃圾回收次数、老年代垃圾回收耗时、总垃圾回收耗时。

  5. S0C、S1C、EC、SC、OC、MC、CCSC:表示 Survivor 0、Survivor 1、Eden Space、Permanent Space、老年代、元空间、压缩类空间的当前容量;

监视java进程gc情况:

jstat -gcutil pid 3000 (百分比)
jstatgcutil.png

或jstat -gc pid 3000(单位M)
jstatgc.png
存储GC日志

conf文件配置:-XX:+PrintGCDateStamps -XX:+PrintGCDetails -Xloggc:/xxx/gclog/gclog

  1. 生成gc日志;
  2. 上传gc日志文件,gceasy检测gc日志; gceasy官网
gceasy01.png

gceasy02.png

gceasy03.png

思考:如果服务在一定时间内FullGC次数过高,但是有没有OutOfMemory,我们可以利用FullGC的时间节点,在打印日志中查找调用了哪些接口,再结合代码,排查一些潜在的大中对象,解决一些潜在的内存溢出风险;

存储抛出内存dump文件

jvm配置内存溢出时,抛出内存dump文件
conf文件配置:-XX:+HeapDumpOnOutOfMemoryError -XX:HeapDumpPath=/xxx/dumps/

1.服务挂了,日志中出现java.lang.OutOfMemoryError: GC overhead limit exceeded;
2.使用MAT工具分析dump文件,定位问题;

jvisualvm工具

默认路径:C:\Program Files\Java\jdk1.8.0_181\bin\jvisualvm.exe
Java VisualVM 提供内存和 CPU 分析,堆转储分析,内存泄漏检测等;


javaVisualVM01.png

思考:
1.可以利用jvisualvm工具,排查一些隐患问题。我们启动本地服务(前后端),使用系统功能,同时监测是否存在消耗了大量的内存;
2.如果通过日志发现了可疑的接口或功能(查询数据量过大等),我们可以本地复现该功能或接口是否存在大对象;

参考和学习文章:

JVM
JVM要点
深入理解JVM-内存模型(jmm)和GC
如何进行GC调优
JVM GC日志文件分析
查看JVM参数、内存使用情况及分析
每天100w次登陆请求, 8G 内存该如何设置JVM参数?

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
禁止转载,如需转载请通过简信或评论联系作者。
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 216,919评论 6 502
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 92,567评论 3 392
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 163,316评论 0 353
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 58,294评论 1 292
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 67,318评论 6 390
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 51,245评论 1 299
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 40,120评论 3 418
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 38,964评论 0 275
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 45,376评论 1 313
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 37,592评论 2 333
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 39,764评论 1 348
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 35,460评论 5 344
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 41,070评论 3 327
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 31,697评论 0 22
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,846评论 1 269
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 47,819评论 2 370
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 44,665评论 2 354

推荐阅读更多精彩内容