谈谈线上CPU100%排查套路

向右看齐 2022-10-09 04:53 254阅读 0赞

# 一：[谈谈线上CPU100%排查套路][CPU100] #

下面给出两种系统环节下的排查步骤，都是一模一样的，只是命令稍有区别！

*  查消耗cpu最高的进程Pid
 *  根据Pid查出消耗cpu最高的线程号
 *  根据线程号查出对应的java线程，进行处理。

准备一行死循环代码

public class TestFor {
        public static void main(String[] args) {
            int random = 0;
            while (random < 100) {
                random = random * 10;
            }
        }
    }

怎么跑，应该不用我说了，直接教大家怎么查！

### **Windows版** ###

**查消耗Cpu最高的进程PID**

手边没有`Windows Server`机器，我以`Win 10`为例，截图给大家看一下，先调出`PID`显示项！

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzM3NDY5MDU1_size_16_color_FFFFFF_t_70][]

然后发现进程`PID`如下图所示，为`10856`

![8797d546970a7617848b582338450c3b.png][]

接下来呢

根据PID查出消耗Cpu最高的线程号

这里用到微软的工具Process Explorer v16.22，地址如下

[工具地址][Link 1]

如图所示

![c5d16ed75b741c574648bf425a6137a0.png][]

发现最耗`Cpu`的线程的`TID`为`6616`  
这是十进制的数据，转成十六进制为`0x19d8`

根据线程号查出对应的java线程，进行处理

执行命令

jstack -l 10856 > c:/10856.stack

打开文件`c:/10856.stack`，搜索`19d8`，如下图所示

![3ec50007fce6169bb30008a4581f5ecf.png][]

根据文件就可以看出，我们的`TestFor.java`文件第七行一直在跑，至此定位到问题

### **Linux版** ###

Linux版本，步骤是一模一样的，就是命令换了一下

**查消耗Cpu最高的进程PID**

执行命令

*  执行`top -c` ，显示进程运行信息列表。按下P,进程按照Cpu使用率排序

如下图所示，`PID`为`3033`的进程耗费`Cpu`最高

![cc3ae81944f5ade1efa57504ddb54614.png][]

根据Pid查出消耗Cpu最高的线程号

执行命令

*  `top -Hp 3033` ，显示一个进程的线程运行信息列表。按下P,进程按照Cpu使用率排序

如下图所示，`PID`为`3034`的线程耗费Cpu最高

![cfa2b68a315be1ce2b2e6d898c794d3b.png][]

这是十进制的数据，转成十六进制为`0Xbda`

根据线程号查出对应的java线程，进行处理

jstack -l 3033 > ./3033.stack

然后执行，grep命令，看线程`0xbda`做了什么

cat 3033.stack |grep 'bda' -C 8

输出如下

![df0f38673e4dc52d9c60d56c6ad41243.png][]

至此定位到问题

[CPU100]: https://www.cnblogs.com/rjzheng/p/10315250.html
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzM3NDY5MDU1_size_16_color_FFFFFF_t_70]: /images/20221005/c12aca142d57478f9fd07a46e696d10a.png
[8797d546970a7617848b582338450c3b.png]: /images/20221005/87345ee39b9d4597be716ca56acaf6c7.png
[Link 1]: https://docs.microsoft.com/zh-cn/sysinternals/downloads/process-explorer
[c5d16ed75b741c574648bf425a6137a0.png]: /images/20221005/2a8c2f4416f64ee48a02044051faed52.png
[3ec50007fce6169bb30008a4581f5ecf.png]: /images/20221005/4fccbcd364b44fefb1100444ab55192b.png
[cc3ae81944f5ade1efa57504ddb54614.png]: /images/20221005/637a144050d04f5f96f254a517c40d69.png
[cfa2b68a315be1ce2b2e6d898c794d3b.png]: /images/20221005/415d59c5510c4bfcb69f986ec0318d1e.png
[df0f38673e4dc52d9c60d56c6ad41243.png]: /images/20221005/f4f3d10257354398b2b9e20775e14838.png