JVM内存溢出排查--存在大量线程未回收

绝地灬酷狼 2022-10-15 00:35 290阅读 0赞

# 前言 #

一个单独调用第三方系统接口的小项目运行一段时间之后就出现了内存溢出，在此记录一下。

# 基础故障处理工具 #

都是利用jdk自带的工具

## jps 虚拟机进程状况工具 ##

可以列出正在运行的虚拟机进程 主要是用来查询pid的  
![在这里插入图片描述][20210522155351946.png]

## jmap 虚拟机进程状况工具 ##

这个功能比较强大

1.  jmap -heap pid 可以分析各代的分配内存 以及占用内存情况等
2.  jmap -histo pid 可以列举出堆中对象信息 实例数量、占用大小
3.  jmap -dump:format=b,file=文件名 pid 可以转成dump文件 利于后续的分析

## jinfo Java配置信息工具 ##

jinfo -flags pid 查看jvm参数  
![在这里插入图片描述][20210525151325253.png]

## VisualVM：多合-故障处理工具 ##

可视化的工具 jdk自带的就在bin目录下  
![在这里插入图片描述][20210522160121721.png]

# 排查流程 #

以下是模拟正式环境的本地排查过程，由于该项目是用来第三方提供的SDK调用他们的接口 我们就运行项目之后模拟调用多次看看情况

## VisualVM查看项目运行状态 ##

左侧本地选择项目就能查看cpu使用率、堆内存占用率、类数量、线程数量，还可以看各代的内存占用情况。  
很显然我们一看就发现不对劲，线程活动数量很大和我们的调用次数基本相同。  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2EyOTQ2MzQ0NzM_size_16_color_FFFFFF_t_70]  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2EyOTQ2MzQ0NzM_size_16_color_FFFFFF_t_70 1]

## 通过jmap获取dump文件分析 ##

通过jps 查询到pid 之后通过jmap -dump命令获取堆转储快照 然后通过VisualVM工具分析  
发现有个对象和线程数大致相同并且占用率也挺高 ，开始查看代码  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2EyOTQ2MzQ0NzM_size_16_color_FFFFFF_t_70 2]

## 检查代码 ##

追踪到代码 每次调用都创建了这个 init() 方法里面有创建线程

public static ExecutableClient initMethod() { 
            ExecutableClient executableClient = ExecutableClient.getInstance();
            executableClient.setAccessKey(appKey);
            executableClient.setSecretKey(appSecret);
            executableClient.setDomainName(appUrl);
            executableClient.setProtocal("https");
            executableClient.init();
            return executableClient;
        }

![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2EyOTQ2MzQ0NzM_size_16_color_FFFFFF_t_70 3]  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2EyOTQ2MzQ0NzM_size_16_color_FFFFFF_t_70 4]

## 单例模式 ##

后面查看了第三方提供的文档 确实是需要单例的，开发的同事一开始没看到。  
通过双重检查锁+volatile关键字实现单例。  
提一下volatile在这里应该是防止指令的重排序。  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2EyOTQ2MzQ0NzM_size_16_color_FFFFFF_t_70 5]

## 结果 ##

改完之后就正常了。  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2EyOTQ2MzQ0NzM_size_16_color_FFFFFF_t_70 6]

[20210522155351946.png]: /images/20221014/5f7b0a7a535f4e5dbe6a3ab3474325e3.png
[20210525151325253.png]: /images/20221014/487ad5caa2ec4c8c8cb6db36334bba6e.png
[20210522160121721.png]: /images/20221014/f505c636866744f481da7b924f297dca.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2EyOTQ2MzQ0NzM_size_16_color_FFFFFF_t_70]: /images/20221014/e53404e124b841648728e5f97b783881.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2EyOTQ2MzQ0NzM_size_16_color_FFFFFF_t_70 1]: /images/20221014/9fa12693825f4f83a28cb116811d1e7c.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2EyOTQ2MzQ0NzM_size_16_color_FFFFFF_t_70 2]: /images/20221014/4d0747ee19724f74b03381256e3faec0.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2EyOTQ2MzQ0NzM_size_16_color_FFFFFF_t_70 3]: /images/20221014/d976eccef01846f2a5e9b75aecab2326.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2EyOTQ2MzQ0NzM_size_16_color_FFFFFF_t_70 4]: /images/20221014/d67fe7afbce749ffb7400521dcb48447.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2EyOTQ2MzQ0NzM_size_16_color_FFFFFF_t_70 5]: /images/20221014/4edd8e7757644f048fa6e457bda1cd86.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2EyOTQ2MzQ0NzM_size_16_color_FFFFFF_t_70 6]: /images/20221014/e7ae5d21d8404e378a1020851f8bd04d.png