一、错误重现

2022-12-29 10:12:07.210 ERROR 73511 --- [nio-8001-exec-6] o.a.c.c.C.[.[.[/].[dispatcherServlet]    : Servlet.service() for servlet [dispatcherServlet] in context with path [] threw exception [Handler dispatch failed; nested exception is java.lang.OutOfMemoryError: GC overhead limit exceeded] with root causejava.lang.OutOfMemoryError: GC overhead limit exceeded

出现该问题的原因:当GC为释放很小空间占用大量时间时会抛出此异常,即(Sun 官方对此的定义,超过98%的时间用来做GC并且回收了不到2%的堆内存时会抛出此异常)。一般是因为堆太小,导致异常的原因:没有足够的内存。

对于该项目我的启动命令如下:堆内存空间开辟的是256m

nohup java -Xms256m -Xmx256m -Dspring.profiles.active=test -jar ...

在数据量没有巨量增加的时候该对内存空间是足够的,因为我们的文件基本都在1m以内,所以开辟的内存空间也足够,但是后来由于算法业务的变化,数据量直接达到了50m多,因此就出现了上面的OOM的情况,在一次请求的情况下YGC就达到了81次,FGC达到了51次。具体信息如下:

二、问题分析

其实出现OOM的情况很多,今天主要就我这种情况进行一个简单的分析,该错误信息:

java.lang.OutOfMemoryError: GC overhead limit exceeded

当然出现该问题的主要原因在于:项目启动的时候堆内存空间分的不够,不过我们也能够从自身的代码做一些优化,比如说:可以让处理数据的过程变得更加简单一下,不要有过多的内存开销情况,这种情况也是要对JVM启动参数进行重新调整;另一个方面我们可以直接从JVM分配堆内存的角度进行优化,当然需要对我们的业务了解后,将项目做一个业务模型的提炼,然后分析该模型的内存开销情况,根据分析的内存开销情况对JVM内存做出预判。

三、问题解决

我们在清楚了问题的情况下,接下来主要分享解决问题的过程,其实这里很多人可能会问,我们对JVM的内存开辟主要依据是什么?到底这个内存开辟多少合适?

我个人认为这个问题的关键在于我们对系统主要业务的了解,然后对主要业务流程建立业务模型,再对业务模型的请求数据量做大概的估算,即便是具有高并发的系统也是如此方法计算。下面就拿我们的系统来打比方:我们的系统模型中内存开销最多的情况在于用户数据的导入+算法计算后的数据量,这样一来我们就可以计算出该模型中一次请求大概的内存开销。如果有高并发,在计算出每秒钟有多少次这样的请求,这样就很容易计算出JVM启动的内存大概开辟多少合适。当我调整后启动命令如下:

nohup java -Xms1024m -Xmx1024m -Dspring.profiles.active=test -jar ...

我这个系统demo计算的依据在于:

1、该系统中消耗内存最大的地方是:用户导入数据+算法计算后数据的处理;

2、该系统的算法计算后数据大概在50m多,这里也就是说一个请求过来我数据量占用的内存就要达到50m;

3、该次请求中其它内存消耗估算在50m,因为用户导入数据也非常耗费内存;

4、当然还有很多的增删改查操作:估算在100m;

5、最后在我们计算出来的主要开销情况下扩大5到10倍。

所以我就单台服务器开辟JVM内存空间在1024m,在正常情况下还是没有问题的。

这里非常明显能够看到YGC进行了41次,FGC进行了0次:

四、总结

其实平时我们学习再多的理论知识,不如一次生产实践中遇到一次问题带来的收获多。当然这里分享的如有错误还望指出,只有这样才能不断的进步。

参考文档:Java OOM 基础篇:常见的OutOfMemoryError 场景二 : GC overhead limit exceeded 问题详解 | HeapDump性能社区

java.lang.OutOfMemoryError: GC overhead limit exceeded问题分析及解决相关推荐

  1. java.lang.OutOfMemoryError: GC overhead limit exceeded 问题分析和解决(转)

    在项目历史数据导入过程中,出现了应用无法访问的情况.立刻对Weblogic进行分析,发现Weblogic的内存.线程等性能良好,Server也是Running的状态.随后查看了Weblogic日志,在 ...

  2. java.lang.OutOfMemoryError GC overhead limit exceeded原因分析及解决方案

    最近一个上线运行良好的项目出现用户无法登录或者执行某个操作时,有卡顿现象.查看了日志,出现了大量的java.lang.OutOfMemoryError: GC overhead limit excee ...

  3. java.lang.OutOfMemoryError: GC overhead limit exceeded

    今天现场weblogic报java.lang.OutOfMemoryError: GC overhead limit exceeded,在metalink查了下,有明白解释,要设置一个JVM參数.只是 ...

  4. What means the error-message 'java.lang.OutOfMemoryError: GC overhead limit exceeded' in Java?

    转国内的: 一.异常如下:Exception in thread "main" java.lang.OutOfMemoryError: GC overhead limit exce ...

  5. Spark读取HDFS上的Snappy压缩文件所导致的内存溢出问题 java.lang.OutOfMemoryError: GC overhead limit exceeded

    报错java.lang.OutOfMemoryError: GC overhead limit exceeded HDFS上有一些每天增长的文件,使用Snappy压缩,突然某天OOM了 1.原因: 因 ...

  6. java gc error_java.lang.OutOfMemoryError GC overhead limit exceeded原因分析及解决方案

    最近一个上线运行良好的项目出现用户无法登录或者执行某个操作时,有卡顿现象.查看了日志,出现了大量的java.lang.OutOfMemoryError: GC overhead limit excee ...

  7. java.lang.OutOfMemoryError: GC overhead limit exceeded解决办法

    原文地址为: java.lang.OutOfMemoryError: GC overhead limit exceeded解决办法 java.lang.OutOfMemoryError: GC ove ...

  8. spark程序运行异常:java.lang.OutOfMemoryError: GC overhead limit exceeded

    此次异常是在集群上运行的spark程序日志中发现的.由于这个异常导致sparkcontext被终止,以致于任务失败: 出现的一些原因 参考:GC overhead limit exceeded jav ...

  9. 【java.lang.OutOfMemoryError:GC overhead limit exceeded异常解决方法】

    问题描述 由于同时启动了多个项目,导致电脑蓝屏重启,重启后idea启动项目,提示系统资源不足,和Information:java: java.lang.OutOfMemoryError: GC ove ...

最新文章

  1. 【Android OpenGL ES】阅读hello-gl2代码(二)Java代码
  2. 企业 - php nginx memcache
  3. 不允许使用不完整的类型解决方法
  4. DPDK — RTE_LOG 日志模块
  5. 简述区块链(1)- 也许只有这一篇
  6. 实例演示在SQL中启用全文检索
  7. idea代码样式模板_阿里p3c(代码规范,eclipse插件、模版,idea插件)
  8. arcgis将点的属性赋值给面
  9. python arduino c_从Python向Arduino LCD发送一个字符串
  10. 抽象类、接口作为方法返回值和参数
  11. 我发现混的好的,都是挺能“吹牛逼”的
  12. 【Spring】对象后期处理,BeanPostProcessor
  13. 长链剖分算法完整总结
  14. HTML5期末大作业:中华美德文化网站设计——中华美德文化(6页) HTML+CSS+JavaScript 中国传统美德文化网页HTML代码
  15. 蓝牙耳机哪个音质好?推荐几款音质好的蓝牙耳机
  16. 多伦多大学Self-Driving Cars自动驾驶专项课程(十八)Proportional-Integral-Derivative(PID) Control
  17. 基于微信跳蚤市场二手交易小程序系统设计与实现 开题报告
  18. vue {{}}中小数保留几位小数的toFixed(小数位数)方法
  19. 智慧公厕,让厕所也成为城市文明的一部分
  20. HTML+PHP搭建一个生物数据增删查改网站

热门文章

  1. A股上市公司招投标数据
  2. Android 弹出对话框怎么做?(小白速成9)
  3. 论根治牙疼远离拔牙的牙膏配方
  4. Oracle 性能优化之AWR、ASH和ADDM(含报告生成和参数解读)
  5. resnet网络特征提取过程可视化
  6. nacos: Error watching Nacos Service change
  7. 易查分应用大全:查询统计功能使用说明
  8. 基于STM32的最简易蓝牙遥控小车
  9. ssl证书的注册与nginx的配置
  10. linux查看用户ulimit,linux下关于ulimit