一次业务逻辑优化，竟然解决了MySQL CPU消耗800%的性能问题！

左手的ㄟ右手 2021-10-19 02:58 217阅读 0赞

公众号后台回复“**学习**”，获取作者独家秘制精品资料

![640?wx\_fmt=png][640_wx_fmt_png]

![640?wx\_fmt=jpeg][640_wx_fmt_jpeg]

扫描下方海报二维码，试听课程：

**（课程详细大纲，请参见文末）**

![640?wx\_fmt=jpeg][640_wx_fmt_jpeg 1]

![640?wx\_fmt=png][640_wx_fmt_png]

文章来自头条号：波波说运维

# 概述 #

最近接到IDC监控告警说某台服务器cpu过高，下面记录下故障排查的过程，仅供参考，这里主要看思路，细节不重要。

--------------------

# 1、观察服务器资源消耗 #

可以看到服务器表现为cpu问题，内存消耗正常。

![640?wx\_fmt=jpeg][640_wx_fmt_jpeg 2]

![640?wx\_fmt=jpeg][640_wx_fmt_jpeg 3]

1.1、查看具体cpu

ps -mp 2289 -o THREAD,tid,time

![640?wx\_fmt=jpeg][640_wx_fmt_jpeg 4]

![640?wx\_fmt=jpeg][640_wx_fmt_jpeg 5]

1.2、找到耗时最高的线程TID，并将其线程ID转换为16进制格式：

printf "%x\\n" tid

![640?wx\_fmt=jpeg][640_wx_fmt_jpeg 6]

1.3、打印线程的堆栈信息，thread dump

jstack pid |grep tid -A 30

进一步分析堆栈信息

--------------------

# 2、检查数据库线程 #

这里发现大概有8个线程，而且都是同一条sql

![640?wx\_fmt=jpeg][640_wx_fmt_jpeg 7]

--------------------

# 3、查看sql执行计划 #

这个单条sql只需要2s就可以跑完，不过看执行计划是走了全表扫描，并没有走索引

![640?wx\_fmt=jpeg][640_wx_fmt_jpeg 8]

![640?wx\_fmt=jpeg][640_wx_fmt_jpeg 9]

--------------------

# 4、慢查询分析 #

set global slow\_query\_log=on;  
set global long\_query\_time=30;  
set global log\_output='TABLE';  
show variables like '%slow%';  
select \* from mysql.slow\_log order by 1;

![640?wx\_fmt=jpeg][640_wx_fmt_jpeg 10]

以下是因为先开了没有走索引就记录下来，所以可以看到这条sql，但是开了慢查询后并没有超过30s的慢sql.

![640?wx\_fmt=jpeg][640_wx_fmt_jpeg 11]

--------------------

# 5、定时任务？ #

跟开发确认后是有个定时任务，每次都需要去查每个用户的考勤时间，最后再汇总统计，这个定时任务需要跑一天的时间。

这里问题主要是嵌套循环，外层循环遍历工号（8000），内层循环遍历天数（30天），然后内层循环每次查数据都需要去跟数据库做一次交互，在插入数据到缓存，最后汇总计算到汇总表。

--------------------

# 6、优化方案 #

1、汇总表拆分

常用字段划为一张表，不常用字段划分为另一张表，然后常用字段这些只做汇总计算，不走循环，不常用字段（如婚假、病假等）这些走循环。

![640?wx\_fmt=jpeg][640_wx_fmt_jpeg 12]

2、优化单条查询

这个建索引，控制在1s内

\--大表建索引，驱动表不建索引  
create index idx\_hwb1 on t\_att\_dd\_attendance\_info(user\_id,class\_id,check\_type,plan\_check\_time)

![640?wx\_fmt=jpeg][640_wx_fmt_jpeg 13]

3、逻辑优化

这里跟开发提了把逻辑改了，不过开发还没实现，所以就不贴实现代码了。逻辑大致如下：

--目前逻辑
    {
       
     /*外层循环遍历工号*/
     {
       
     /*内层循环遍历天数*/
     }
    }
    --优化后的逻辑
    {
       
     /*外层循环遍历天数*/
     {
       
     /*内层循环遍历工号*/
     }
    }

**END**

**如有收获，请划至底部，点击“在看”，谢谢！**

![640?wx\_fmt=png][640_wx_fmt_png]

《21天互联网Java进阶面试训练营（分布式篇）》详细目录，**扫描图片末尾的二维码，试听课程**

![640?wx\_fmt=jpeg][640_wx_fmt_jpeg 14]

![640?wx\_fmt=jpeg][640_wx_fmt_jpeg 15]

![640?wx\_fmt=jpeg][640_wx_fmt_jpeg 16]

![640?wx\_fmt=png][640_wx_fmt_png]

欢迎长按下图关注公众号**石杉的架构笔记**

![640?wx\_fmt=jpeg][640_wx_fmt_jpeg 17]

**BAT架构经验倾囊相授**

[640_wx_fmt_png]: /images/20211018/237675b59d014037bc0319ba0ee63d64.png
[640_wx_fmt_jpeg]: /images/20211018/f83253c4e38649f9ba76855433d51bb8.png
[640_wx_fmt_jpeg 1]: /images/20211018/391e4a39b19143799fde6038442da744.png
[640_wx_fmt_jpeg 2]: /images/20211018/3ef7ddf2ba5347d09758021097bc4ce2.png
[640_wx_fmt_jpeg 3]: /images/20211018/686140e8953649929c9856cc4f70744a.png
[640_wx_fmt_jpeg 4]: /images/20211018/34043825c36f48bbba653bc4b507ab58.png
[640_wx_fmt_jpeg 5]: /images/20211018/d45b5546c1f740e3ac0d44bb4d5ec6c9.png
[640_wx_fmt_jpeg 6]: /images/20211018/957fe91eb3fc4eb39d6f4f110cd2f976.png
[640_wx_fmt_jpeg 7]: /images/20211018/d8de774ab0be40c6bdde890dd34d2412.png
[640_wx_fmt_jpeg 8]: /images/20211018/31de00b4159748a3bcd4c64fc14b051d.png
[640_wx_fmt_jpeg 9]: /images/20211018/1deec1bbd32a40a6ab570bcb1db9e16f.png
[640_wx_fmt_jpeg 10]: /images/20211018/60df4f08d4774a12ab34882b3fb742c4.png
[640_wx_fmt_jpeg 11]: /images/20211018/62501e984ace4a34a6d520a08da830bf.png
[640_wx_fmt_jpeg 12]: /images/20211018/c29527c4b9f548998d6e71d60ce39173.png
[640_wx_fmt_jpeg 13]: /images/20211018/1dae5d70154542d9bb632b08fe445e80.png
[640_wx_fmt_jpeg 14]: /images/20211018/ad35180eccf5468b8f302793105a5363.png
[640_wx_fmt_jpeg 15]: /images/20211018/5337bdffcc284562a4a0d50df4b9512a.png
[640_wx_fmt_jpeg 16]: /images/20211018/54bc826900084dafaad612c0d3275fda.png
[640_wx_fmt_jpeg 17]: /images/20211018/3ad74a8250f747059e33b4002950e35b.png