分享好友 最新动态首页 最新动态分类 切换频道
JVM之CMS垃圾收集器详解
2024-12-26 18:45

: https://docs.oracle.com/javase/8/docs/technotes/guides/vm/gctuning/cms.html#concurrent_mark_sweep_cms_collector

JVM之CMS垃圾收集器详解

CMS(Concurrent Mark Sweep)收集器是一种以获取 为目标的收集器。

采用的是"标记-清除算法",整个过程分为4步

 

由于整个过程中,并发标记和并发清除,收集器线程可以与用户线程一起工作,所以总体上来说,CMS收集器的内存回收过程是与用户线程一起并发地执行的。

 
 

初始化标记阶段是串行的,这是JDK7的行为。JDK8以后默认是并行的,可以通过参数

-XX:+CMSParallelInitialMarkEnabled控制

Backgroud CMS

实际上我们的并发标记还能被整理成两个流程

(1)初始标记
(2)并发标记
(3)并发预处理
(4)可中止的预处理
(5)重新标记
(6)并发清除

为什么我们的并发标记细化之后还会额外有两个流程出现呢

讨论这个问题之前,我们先思考一个问题,假设CMS要进行老年代的垃圾回收,我们如何判断被年轻代的对象引用的老年代对象是可达对象。

也就是这张图,当老年代被回收的时候,我们如何判断A对象是存活对象。

:必须扫描新生代来确定,所以CMS虽然是老年代的垃圾回收器,却需要扫描新生代的原因。

问题2:既然这个时候我需要扫描新生代,那么全量扫描会不会很慢

:肯定会的 ,但是接踵而来的问题:既然会很慢,我们的停顿时间很长,可是CMS的目标是什么

CMS(Concurrent Mark Sweep)收集器是一种以获取 为目标的收集器。这不是与他的设计理念不一致吗

思考:怎么让我们的回收变快

:肯定是垃圾越少越快。所以我们的CMS想到了一种方式,就是我先进行新生代的垃圾回收,也就是一次young GC,回收完毕之后。是不是我们新生代的对象就变少了,那么我再进行垃圾回收,是不是就变快了。

所以,CMS有两个参数

CMSScheduleRemarkEdenSizeThreshold 默认值:2M

CMSScheduleRemarkEdenPenetration 默认值:50%

这两个参数组合起来就是预清理之后,Eden空间使用超过2M的时候启动可中断的并发预清理(CMS-concurrent-abortable-preclean,到Eden空间使用率到达50%的时候中断(但不是结束,进入Remark(重新标记阶段)。

这里面有个概念,老师,为什么并发预处理前面会有可中断几个字呢?什么意思。

可中断意味着,假设你一直在预处理,预处理是干什么,无非就是去帮你把正式应该处理的前置工作给做了。所以他一定干了很多事情,但是这些事情迟早有个头,所以就设置了一个时间对他进行打断。所以,并发预处理的逻辑是当你发生了minor GC ,我就预处理结束了。

这里有个问题,我怎么知道你什么时候发生minor GC

:答案是我不知道,垃圾回收是JVM自动调度的,所以我们无法控制垃圾回收。

那我不可能无限制的执行下去,总要有个结束时间吧

CMS提供了一个参数CMSMaxAbortablePrecleanTime ,默认为5S

只要到了5S,不管发没发生Minor GC,有没有到CMSScheduleRemardEdenPenetration都会中止此阶段,进入remark。

如果在5S内还是没有执行Minor GC怎么办

CMS提供CMSScavengeBeforeRemark参数,使remark前强制进行一次Minor GC。

到这里,新生代策略已经聊完了

接下来老年代的话,有几个重要的点先给大家聊一下。

记忆集

当我们进行young gc时,我们的gc roots除了常见的栈引用、静态变量、常量、锁对象、class对象这些常见的之外,如果 老年代有对象引用了我们的新生代对象 ,那么老年代的对象也应该加入gc roots的范围中,但是如果每次进行young gc我们都需要扫描一次老年代的话,那我们进行垃圾回收的代价实在是太大了,因此我们引入了一种叫做记忆集的抽象数据结构来记录这种引用关系。

记忆集是一种用于记录从非收集区域指向收集区域的指针集合的数据结构。

 

卡表

记忆集是我们针对于跨代引用问题提出的思想,而卡表则是针对于该种思想的具体实现。(可以理解为记忆集是结构,卡表是实现类

[1字节,00001000,1字节,1字节]

 

(1) 卡表是使用一个字节数组实现:CARD_TABLE[],每个元素对应着其标识的内存区域一块特定大小的内存块,称为"卡页"。hotSpot使用的卡页是2^9大小,即512字节

(2) 一个卡页中可包含多个对象,只要有一个对象的字段存在跨代指针,其对应的卡表的元素标识就变成1,表示该元素变脏,否则为0。GC时,只要筛选本收集区的卡表中变脏的元素加入GC Roots里。

卡表的使用图例

并发标记的时候,A对象发生了所在的引用发生了变化,所以A对象所在的块被标记为脏卡

继续往下到了重新标记阶段,修改对象的引用,同时清除脏卡标记。

卡表其他作用

老年代识别新生代的时候

对应的card table被标识为相应的值(card table中是一个byte,有八位,约定好每一位的含义就可区分哪个是引用新生代,哪个是并发标记阶段修改过的

Foregroud CMS

其实这个也是CMS一种收集模式,但是他是并发失败才会走的模式。这里聊到一个概念,什么是并发失败呢

并发失败官方的描述是

如果 并发搜集器不能在年老代填满之前完成不可达(unreachable)对象的回收 ,或者 年老代中有效的空闲内存空间不能满足某一个内存的分配请求 ,此时应用会被暂停,并在此暂停期间开始垃圾回收,直到回收完成才会恢复应用程序。这种无法并发完成搜集的情况就成为 并发模式失败(concurrent mode failure ,而且这种情况的发生也意味着我们需要调节并发搜集器的参数了。

简单来说,也就是我去进行并发标记的时候,内存不够了,这个时候我会进入STW,并且开始全局Full GC.

那么什么时候会进行并发失败呢 换句话说,我们的难道非要满了之后才进行收集

 

看源码公式

((100 - MinHeapFreeRatio) + (double)( CMSTriggerRatio * MinHeapFreeRatio) / 100.0) / 100.0

也就是按照默认值

当老年代达到 ((100 - 40) + (double) 80 * 40 / 100 ) / 100 = 92 %时,会触发CMS回收。

如何避免他的出现

为了尽量避免并发模式失败发生,我们可以调节-XX:CMSInitiatingOccupancyFraction=参数,去控制当年老代的内存占用达到多少的时候(N%,便开启并发搜集器开始回收年老代。

CMS的标记压缩算法-----MSCMark Sweep Compact

他的回收方式其实就是我们的滑动整理,并且进行整理的时候一般都是两个参数

 

碎片问题也是CMS采用的标记清理算法最让人诟病的地方:Backgroud CMS采用的标记清理算法会导致内存碎片问题,从而埋下发生FullGC导致长时间STW的隐患。

所以如果触发了FullGC,无论是否会采用MSC算法压缩堆,那都是ParNew+CMS组合非常糟糕的情况。因为这个时候并发模式已经搞不定了,而且整个过程单线程,完全STW,可能会压缩堆(是否压缩堆通过上面两个参数控制,真的不能再糟糕了!想象如果这时候业务量比较大,由于FullGC导致服务完全暂停几秒钟,甚至上10秒,对用户体验影响得多大。

三色标记

在并发标记的过程中,因为标记期间应用线程还在继续跑,对象间的引用可能发生变化,多标和漏标的情况就有可能发生。这里引入“三色标记”来给大家解释下,把Gcroots可达性分析遍历对象过程中遇到的对象, 按照“是否访问过”这个条件标记成以下三种颜色

黑色

 

灰色

 

白色:

 

标记过程

1.初始时,所有对象都在 【白色集合】中

2.将GC Roots 直接引用到的对象 挪到 【灰色集合】中

3.从灰色集合中获取对象

  1. 将本对象 引用到的 其他对象 全部挪到 【灰色集合】中
  2. 将本对象 挪到 【黑色集合】里面。

重复步骤3.4,直至【灰色集合】为空时结束。

结束后,仍在【白色集合】的对象即为GC Roots 不可达,可以进行回收

多标-浮动垃圾

 

漏标-读写屏障

漏标只有同时满足以下两个条件时才会发生

 

漏标会导致被引用的对象被当成垃圾误删除,这是严重bug,必须解决,有两种解决方案增量更新(Incremental Update) 和原始快照(Snapshot At The Beginning,SATB

增量更新就是当黑色对象插入新的指向白色对象的引用关系时, 就将这个新插入的引用记录下来, 等并发扫描结束之后, 再将这些记录过的引用关系中的黑色对象为根, 重新扫描一次。 这可以简化理解为, 黑色对象一旦新插入了指向白色对象的引用之后, 它就变回灰色对象了。

原始快照就是当灰色对象要删除指向白色对象的引用关系时, 就将这个要删除的引用记录下来, 在并发扫描结束之后, 再将这些记录过的引用关系中的灰色对象为根, 重新扫描一次,这样就能扫描到白色的对象,将白色对象直接标记为黑色(目的就是让这种对象在本轮gc清理中能存活下来,待下一轮gc的时候重新扫描,这个对象也有可能是浮动垃圾)

以上无论是对引用关系记录的插入还是删除, 虚拟机的记录操作都是通过写屏障实现的。

写屏障实现原始快照(SATB 当对象B的成员变量的引用发生变化时,比如引用消失(a.b.d = null,我们可以利用写屏障,将B原来成员变量的引用对象D记录下来

写屏障实现增量更新 当对象A的成员变量的引用发生变化时,比如新增引用(a.d = d,我们可以利用写屏障,将A新的成员变量引用对象D 记录下来

CMS标记清除的全局整理

由于CMS使用的是标记清除算法,而标记清除算法会有大量的内存碎片的产生,所以JVM提供了

-XX:+UseCMSCompactAtFullCollection参数用于在全局GC(full GC)后进行一次碎片整理的工作

由于每次全局GC后都进行碎片整理会较大的影响停顿时间,JVM又提供了参数

-XX:CMSFullGCsBeforeCompaction控制在几次全局GC后会进行碎片整理

-XX:+UseConcMarkSweepGC

打开CMS GC收集器。JVM在1.8之前默认使用的是Parallel GC,9以后使用G1 GC。

-XX:+UseParNewGC

当使用CMS收集器时,默认年轻代使用多线程并行执行垃圾回收(UseConcMarkSweepGC开启后则默认开启)。

-XX:+CMSParallelRemarkEnabled

采用并行标记方式降低停顿(默认开启)。

-XX:+CMSConcurrentMTEnabled

被启用时,并发的CMS阶段将以多线程执行(因此,多个GC线程会与所有的应用程序线程并行工作)。(默认开启

-XX:ConcGCThreads

定义并发CMS过程运行时的线程数。

-XX:ParallelGCThreads

定义CMS过程并行收集的线程数。

-XX:CMSInitiatingOccupancyFraction

该值代表老年代堆空间的使用率,默认值为68。当老年代使用率达到此值之后,并行收集器便开始进行垃圾收集,该参数需要配合UseCMSInitiatingOccupancyOnly一起使用,单独设置无效。

-XX:+UseCMSInitiatingOccupancyOnly

该参数启用后,参数CMSInitiatingOccupancyFraction才会生效。默认关闭。

-XX:+CMSClassUnloadingEnabled

相对于并行收集器,CMS收集器默认不会对永久代进行垃圾回收。如果希望对永久代进行垃圾回收,可用设置-XX:+CMSClassUnloadingEnabled。默认关闭。

-XX:+CMSIncrementalMode

开启CMS收集器的增量模式。增量模式使得回收过程更长,但是暂停时间往往更短。默认关闭。

-XX:CMSFullGCsBeforeCompaction

设置在执行多少次Full GC后对内存空间进行压缩整理,默认值0。

-XX:+CMSScavengeBeforeRemark

在cms gc remark之前做一次ygc,减少gc roots扫描的对象数,从而提高remark的效率,默认关闭。

-XX:+ExplicitGCInvokesConcurrent

该参数启用后JVM无论什么时候调用系统GC,都执行CMS GC,而不是Full GC。

-XX:+ExplicitGCInvokesConcurrentAndUnloadsClasses

该参数保证当有系统GC调用时,永久代也被包括进CMS垃圾回收的范围内。

-XX:+DisableExplicitGC

该参数将使JVM完全忽略系统的GC调用(不管使用的收集器是什么类型)。

-XX:+UseCompressedOops

这个参数用于对类对象数据进行压缩处理,提高内存利用率。(默认开启

-XX:MaxGCPauseMillis=200

这个参数用于设置GC暂停等待时间,单位为毫秒,不要设置过低。

区分young区的parnew gc线程数和old区的cms线程数,分别为以下两参数

  • -XX:ParallelGCThreads=m // STW暂停时使用的GC线程数,一般用满CPU
  • -XX:ConcGCThreads=n // GC线程和业务线程并发执行时使用的GC线程数,一般较小

ParallelGCThreads

其中ParallelGCThreads 参数的默认值是

  • CPU核心数 <= 8,则为 ParallelGCThreads=CPU核心数,比如4C8G取4,8C16G取8
  • CPU核心数 > 8,则为 ParallelGCThreads = CPU核心数 * 5/8 + 3 向下取整
  • 16核的情况下,ParallelGCThreads = 13
  • 32核的情况下,ParallelGCThreads = 23
  • 64核的情况下,ParallelGCThreads = 43
  • 72核的情况下,ParallelGCThreads = 48

ConcGCThreads

ConcGCThreads的默认值则为

ConcGCThreads = (ParallelGCThreads + 3)/4 向下取整。

  • ParallelGCThreads = 1~4时,ConcGCThreads = 1
  • ParallelGCThreads = 5~8时,ConcGCThreads = 2
  • ParallelGCThreads = 13~16时,ConcGCThreads = 4

第一种情况:8C16G左右服务器,再大的服务器可以上G1了 没必要

 

第二种情况:4C8G

 

第三种情况:2C4G,这种情况下,也不推荐使用,因为2C的情况下,线程上下文的开销比较大,性能可能还不如你不动的情况,没必要。非要用,给你个配置,你自己玩。

最新文章
Python ML常用库安装-详细滴
官网:tensorflow官网 1.CPU版本:2.GPU版本:安装预览版本(非稳定版本):3.导入(import)tensorflow出现DDL问题: vc_redist.x64.exe地址:下载地址 4.tensorflow的GPU版本前置cuda和cudnn要求:
韵云电脑软件,一款实用好用的云电脑选择
江山如画,云间电脑,仙子何方?试问世间,哪款软件,独领风骚?千古兴亡,岁月如梭,电子云舟,载我前行,欲觅良伴,指点江山,谈笑风生,今吾赋诗,以颂云电脑之佳选。吾观软件,犹如明珠,光华四射,首选“华为云电脑”,此乃国产之瑰宝
黄鹤楼(硬)红景天多少钱一包 黄鹤楼硬红景天价格
黄鹤楼红景天源自于西藏,相信很多朋友都见过了也抽过了,藏烟只接触过一次黄鹤楼的红景天,感觉还是不错的,黄鹤楼(硬)红景天多少钱一包?下面香烟网小编为大家整理介绍目前市面上现有的两款黄鹤楼硬红景天价格。黄鹤楼硬红景天价格1、黄鹤
指导大家微信红包透视专用开挂神器玩家必备神器
亲,天天麻将这款游戏可以开挂的,确实是有挂的,很多玩家在天天麻将这款游戏中打牌都会发现很多用户的牌特别好,总是好牌,而且好像能看到-人的牌一样。所以很多小伙伴就怀疑这款游戏是不是有挂,实际上这款游戏确实是有挂的,添加客服微
全国性服务低成本付费投流广告推荐 汽车投流 专属定制
  信息流付费获客是一种营销策略,通过在信息流平台上购买广告位或推广服务,向用户展示相关的内容,从而吸引用户点击和转化为付费用户。  在进行信息流付费获客时,可以选择以下几种方式:  1. 广告投放:在信息流平台上购买广告位
许冠文黄子华打破戏路,口碑港片《破·地狱》如何“破”题生死?
一个专拍喜剧的导演陈茂贤,两代“喜剧之神”许冠文和黄子华,却合力拍出一部严肃讨论生死话题的电影《破·地狱》。电影从半路出家的殡仪经纪魏道生(黄子华 饰)和古板守旧的喃呒师傅郭文(许冠文 饰)的故事中观照人生,带出对生命和死亡
高效流量入口攻略,引流搭建实用指南
本指南提供引流搭建的实用步骤,助你打造高效流量入口。涵盖选择、优化内容、利用SEO策略、社交媒体推广等多方面技巧,确保吸引目标用户,提升流量率。方向精炼架构搜索引擎优化(SEO)策略社交媒体营销推广邮件营销策略数据驱动分析与持续
搭建专业从零开始攻略
从零搭建专业,首先选择合适的建设,如WordPress,购买域名和主机。安装并配置,设计布局,添加内容,优化SEO,最后进行与。整个过程中需关注用户体验和搜索引擎优化,确保既美观又实用。挑选理想的主机购置主机配置主机提升性能与更新在数
微信视频号平台广告投放怎么做
微信视频号平台广告投放怎么做创意的力量无处不在,而微信视频号平台正是展示和传播创意的juejia平台。作为广州博辉网络技术有限公司,我们专注于今日头条巨量引擎、快手磁力智投和磁力金牛、小红书、广点通以及视频号等等信息流广告投放开
又双叒叕拿奖!移动云闪耀2024全球数字经济大会
近日,由全球数字经济大会组委会主办,中国信息通信研究院(以下简称“中国信通院”)、中国通信企业协会承办的2024全球数字经济大会云·AI·计算国际合作论坛在京召开,大会全面围绕产业发展、关键技术、最佳实践等展开交流讨论,为全球数
相关文章
推荐文章
发表评论
0评