OutOfMemory内存溢出问题排查
错误
2022-12-06 00:43:53.296[,] [registrationTask1] ERROR
o.s.s.support.TaskUtils$LoggingErrorHandler.handleError@96 -
Unexpected error occurred in scheduled task.
java.lang.OutOfMemoryError: Java heap space 2022-12-06 00:42:49.129[,]
[redisson-netty-4-39] WARN
io.netty.resolver.dns.DnsNameResolver.channelRead@1210 - [id:
0xca8e828a, L:/0:0:0:0:0:0:0:0:38476] Received a DNS response with an
unknown ID: 9619 xxl-job, JobThread-43-1670256900014
当出现OOM的时候运维首先重启了服务,然后将heapdump-8050.hprof的dump日志文件导出,这里导出需要在jvm启动参数添加如下参数:
-XX:-HeapDumpOnOutOfMemoryError -XX:HeapDumpPath=/mnt/TXG/quartz/heapdump-8050.hprof
排查思路
-
下载MAT工具进行分析,链接:添加链接描述
-
导入hprof日志
-
点击柱状图查看对象引用关系
从上面可以看出usersInfo的对象特别多,所以问题的原因应该就算usersInfo对象加载过多导致,usersInfo没有出现被引用的对象,那么凭借经验应该是一次性加载这个对象的时候过多导致; -
查看线程定位具体溢出代码
点击齿轮表示线程,再点击Total:25 of 54 entries;29 more(总计:54个条目中的25个;29更多),点击更多展开查看是否存在业务代码标识;
根据上图可以得到代码问题:com.ytjj.quartz.task.ProductTask(400行)
这里得出查询未做分页处理,根据sql日志这个时刻数据查询出了4百多万条数据,导致内存溢出,问题解决;