JVM问题排查

左手的ㄟ右手 2023-06-10 11:27 19阅读 0赞

## 我的虚拟机运行命令和参数 ##

java -Xms256m -Xmx512m -verbose:gc -Xloggc:/usr/local/tomcat/apache-tomcat-9.0.27/logs/gc.log  -XX:+HeapDumpOnOutOfMemoryError -XX:+PrintHeapAtGC -XX:HeapDumpPath=/usr/local/tomcat/apache-tomcat-9.0.27/logs/error.hprof -XX:+PrintGCApplicationStoppedTime -XX:+PrintGCTimeStamps -XX:+PrintCommandLineFlags -XX:+PrintFlagsFinal -XX:+PrintGCDetails -XX:+UseCMSCompactAtFullCollection -Dcom.sun.management.jmxremote.authenticate=false -Dcom.sun.management.jmxremote.ssl=false -Dcom.sun.management.jmxremote.port=8081 -Djava.rmi.server.hostname=172.16.150.128 -jar /usr/local/tomcat/apache-tomcat-9.0.27/webapps/springboot.jar  > /usr/local/tomcat/apache-tomcat-9.0.27/logs/catalina.out  2>&1 &

上面的参数以一行的形式运行在虚拟机下。

# 参数详解： #

1.  输出GC日志的几个参数：  
    \-XX:+PrintGCTimeStamps  
    \-XX:+PrintGCDetails  
    \-Xloggc:/usr/local/tomcat/apache-tomcat-9.0.27/logs/gc.log（GC日志的输出位置）  
    \-XX:+PrintHeapAtGC
2.  日志文件控制：  
    \-XX:-UseGCLogFileRatation  
    \-XX:GCLogFileSize=8K
3.  内存溢出dump打印：  
    \-XX:+HeapDumpOnOutOfMemoryError  
    \-XX:HeapDumpPath=/usr/local/tomcat/apache-tomcat-9.0.27/logs/error.hprof （打印到指定文件）
4.  CMS垃圾收集器相关参数：  
    \-XX:UseConcMarkSweepGC ：设置CMS并发收集器进行垃圾回收  
    \-XX:UseCMSCompactAtFullCollection ：设置CMS收集器在完成垃圾回收后是否进行一次内存碎片整理  
    \-XX:CMSFullGCBeforeCompaction=5 ：设定进行多少次垃圾回收后进行一次内存压缩  
    \-XX:CMSInitiatingOccupancyFraction：设定CMS收集器在老年代空间被使用多少后触发
5.  Dcom.sun.management.jmxremote.port=8081：8081是需要监控的端口，远程机器需要开启，不要用8080；jconsole可视化工具会用到该端口用于监控JVM

访问项目还是用8080端口：  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3RocXR6cQ_size_16_color_FFFFFF_t_70]  
常用命令：  
jps：Java Virtual Machine Process Status Tool，是JDK 1.5提供的一个显示当前所有java进程pid的命令

## JDK自带的监控工具 ##

1.  jmap -heap pid 堆的使用情况  
    ![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3RocXR6cQ_size_16_color_FFFFFF_t_70 1]
2.  jstat -gcutil pid 2000 : 后面是间隔多少毫秒数后打印记录  
    jstat -gccause pid 2000 ：查看gc收集的原因  
    ![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3RocXR6cQ_size_16_color_FFFFFF_t_70 2]
3.  jstack 线程dump ， [jstack命令排查线上问题][jstack]
4.  jvisualvm: 该命令可以查看线程dump，根据dump定位到方法  
    ![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3RocXR6cQ_size_16_color_FFFFFF_t_70 3]  
    点击线程dump，可以查看dump文件，并定位到具体的代码方法：  
    ![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3RocXR6cQ_size_16_color_FFFFFF_t_70 4]  
    ![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3RocXR6cQ_size_16_color_FFFFFF_t_70 5]  
    ![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3RocXR6cQ_size_16_color_FFFFFF_t_70 6]  
    死锁会导致线程资源被占用，但CPU资源不会飙高。
5.  jconsole : 该命令可打开可视化工具，连接远程IP和端口（监控的端口号）  
    ![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3RocXR6cQ_size_16_color_FFFFFF_t_70 7]

参考连接：[使用jstack排查线程问题][jstack 1]  
[CMS之promotion failed&concurrent mode failure][CMS_promotion failed_concurrent mode failure]

## 问题排除步骤： ##

1.  使用top命令定位到进程；
2.  然后继续使用top定位到线程：top -Hp pid ，pid是进程ID
3.  将线程ID转换为16进制：printf “%x \\n” pid ， pid是线程ID
4.  定位代码：jstack -l | grep -A 10；-A 10 参数用来指定显示行数，否则只会显示一行信息。例如：jstack -l 4972 | grep 139c -A 10

参考博客：[Java内存溢出定位和解决方案][Java]

[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3RocXR6cQ_size_16_color_FFFFFF_t_70]: /images/20230531/fd66d28f780548de83ea14ff25d1f5a1.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3RocXR6cQ_size_16_color_FFFFFF_t_70 1]: /images/20230531/7b4cde2a41854783ae33520aa75a4221.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3RocXR6cQ_size_16_color_FFFFFF_t_70 2]: /images/20230531/5477813e89d140f8ae981d637ed6c184.png
[jstack]: https://blog.csdn.net/thqtzq/article/details/103230740
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3RocXR6cQ_size_16_color_FFFFFF_t_70 3]: /images/20230531/8efffadbd71b4bb7a6d54744a0822bf6.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3RocXR6cQ_size_16_color_FFFFFF_t_70 4]: /images/20230531/db6e9dca56f74dd5b2d1534ee3c7a7be.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3RocXR6cQ_size_16_color_FFFFFF_t_70 5]: /images/20230531/83501d26bf4d4d1c9500e2764712d942.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3RocXR6cQ_size_16_color_FFFFFF_t_70 6]: /images/20230531/2052c8c050de48bcbaf8f0d1ff8fd7b7.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3RocXR6cQ_size_16_color_FFFFFF_t_70 7]: /images/20230531/b4c8a568c8664dfcace36337d874b78a.png
[jstack 1]: https://www.cnblogs.com/rouqinglangzi/p/10691842.html
[CMS_promotion failed_concurrent mode failure]: https://www.jianshu.com/p/ca1b0d4107c5
[Java]: https://www.cnblogs.com/snowwhite/p/9471710.html