记录一次tomcat的cpu使用率很高的监控

偏执的太偏执、 2022-03-22 14:15 252阅读 0赞

**一、问题介绍**  
最近线上的管理后台tomcat老是出现CPU过高的问题。

**二、命令详解**  
**CPU分析—jstack**  
jstack：Java提供的命令。可以查看某个进程的当前线程栈运行情况。根据这个命令的输出可以定位某个进程的所有线程的当前运行状态、运行代码，以及是否死锁等等。  
过程如下：

ps -mp pid -o THREAD,tid,time #这条命令可以找到耗用最高的线程和占用CPU的时间
    printf "%x\n" tid  #将线程的TID转换成十六进制
    jstack PID | grep TID -A100  #打印线程的堆栈信息

**内存分析–jmap**

jmap -heap pid   #查看jvm的内存情况
    jmap -histo:livepid  #第一列，序号，无实际意义第二列，对象实例数量第三列，对象实例占用总内存数，单位：字节第四列，对象实例名称最后一行，总实例数量与总内存占用数

**三、分析过程**  
1.先用jstack命令分析CPU高的原因：  
发现是内存的GC造成的。

2.再用jmap –heap pid查看jvm的内存情况：  
发现新生代和老年代的已使用内存都超过90%，所以会一直GC导致CPU使用率居高不下。

3.用jmap-histo:livepid查看具体的占用内存的类，截图给研发。

4.写脚本监控CPU使用率并记录类的内存使用情况  
vim [monitmemory.sh][]

#!/bin/bash
    pid=`ps aux | grep tomcat | grep -v 'grep' | awk '{print $2}'`  #获取进程pid
    dt=`date +"%y-%m-%d %H:%M:%S"`   #获取时间
    threshold=100  #设置阀值
    t=1
    while (( "$t < 3" ))
    do
        cpu_use=`top -b -n 1 -p $pid | grep edsuser | awk '{print $9}'`
        sleep 2
        echo $dt-$pid-$cpu_use >> /home/monitmemory/cpu.txt
        if [ $(echo "$cpu_use >= $threshold"|bc) = 1 ]; then
            /usr/local/jdk1.8/bin/jmap -histo:live $pid > /home/monitmemory/mem_$(date +%y-%m-%d-%H:%M:%S).log
        fi
        let "t++"
    done

chmod +x [monitmemory.sh][]  
再把该脚本加到定时任务中，1分钟执行1次。

[www@manage-a monitmemory]$ crontab -l
    * * * * * cd /home/monitmemory/ && /bin/sh /home/monitmemory/monitmemory.sh >> /home/monitmemory/123.log 2>&1

重启crond服务：  
service crond restart

[monitmemory.sh]: http://monitmemory.sh