一个数据库服务器高iowait的优化案例

刺骨的言语ヽ痛彻心扉 2022-08-17 14:10 103阅读 0赞

一个数据库服务器高iowait的优化案例

1.开发反馈某一测试环境sql运行缓慢，而在其他测试环境该sql运行很快。两个环境其配置相同，均只部署了mysql服务器。

2.执行top命令发现sql运行缓慢的机器上磁盘iowait较sql运行较快的机器高出很多。推测这是导致sql运行缓慢的主因，因为该sql是要读取表，表较大，且要扫描的行数较多。

3.到底是什么导致机器iowait高呢，执行iotop发现消耗io的进程主要是mysql，而且主要是mysql上的读操作。

4.想必是有其他高频运行的查询语句不停从某大表中查询数据，且查询时可能使用不到索引，要扫描的表行数较多，从而导致高频io操作，致使其他需io操作的sql运行缓慢。

5.究竟是什么sql引起的呢？开启了general log，发现收集到的语句太多，且不能很好定位到高开销的sql。

6.开启slow log,long\_query\_time置为1，来捕获慢查询，同时使用pt-ioprofile用来追踪mysql数据文件中哪些文件上的io消耗比较多。

7.综合slow log(可使用pt-query-digest进行聚合)和pt-ioprofile的结果发现确实是两条典型的需要扫描全表的且对应的表非常大的sql频繁执行导致了磁盘的高io。

8.那么剩下的问题便是优化表或者查询了。最简单直接的是通过建合适的索引来提升查询性能，减少表扫描行数，需要继续榨取性能的话就是优化sql的写法，调整表结构，调整参数配置来解决了。

9.先从收益最大的方法入手，先评估sql语句，根据语句中的条件查看各个字段的数据分布情况，通过explain等评估在字段上创建索引或多列联合索引的合理性，并创建合适的索引。

10.最后发现建好索引后原来需要扫全表的语句通过索引可有效减少扫描行数，继而io操作减少了，服务器的iowait讲题，原来反馈的运行较慢的sql运行速度得以提升，但还是不够理想。

11.最后通过在该慢语句对应的表建索引，并修正where条件中使用错误的值类型极大的提升了sql语句运行速度，且服务器整体IO消耗大大降低。

12.可通过pt-query-digest聚合优化后mysql server产生的slow log以及使用pt-ioprofile分析优化后mysql数据文件io占用情况，可了解到优化前后的差异情况。

发表评论取消回复

表情：

评论列表（有 0 条评论，103人围观）

还没有评论，来说两句吧...

相关阅读

相关高并发访问Oracle数据库优化

第一步：连接数据库以sysdba用户登录 C:\Users\hp>sqlplus / as sysdba SQLPlus: Release 11

浅浅的花香味﹌/ 2023年06月17日 15:56/ 0 赞/ 56 阅读

相关数据库优化案例

现象： 1. 1. 程序大量SQL运行超时; 2. 数据库中大量SQL长时间处于Updating阶段；初步检查： 1. 1. 查看系统状态，C

旧城等待，/ 2022年09月21日 01:42/ 0 赞/ 139 阅读

相关关系型数据库层面的高并发优化

云原生常用技术：[https://landscape.cncf.io/?fullscreen=yes][https_landscape.cncf.io_fullscreen_

冷不防/ 2022年09月03日 10:26/ 0 赞/ 161 阅读

相关一个数据库服务器高iowait的优化案例

一个数据库服务器高iowait的优化案例 1.开发反馈某一测试环境sql运行缓慢，而在其他测试环境该sql运行很快。两个环境其配置相同，均只部署了mysql服务器。 2.执

刺骨的言语ヽ痛彻心扉/ 2022年08月17日 14:10/ 0 赞/ 104 阅读

相关 MySQL NOT EXISTS优化的一个案例

原始语句： SELECT FROM dcf_account.t_posting_transaction t1 WHERE NOT EXISTS ( SELECT

r囧r小猫/ 2022年08月09日 11:56/ 0 赞/ 152 阅读

相关 Oracle 数据库服务器 IO 高的分析方案

在部署了ORACLE数据库的服务器上,我们大家或多或少的遇到过下列情况： 1. 业务系统运行缓慢，作为系统管理员需要检查包括IO在内的系统资源，这时系统管理员、存储管理员可

梦里梦外;/ 2022年06月16日 06:27/ 0 赞/ 265 阅读

相关 MySQL数据库高并发优化配置

`` 在Apache, PHP, mysql的体系架构中，MySQL对于性能的影响最大，也是关键的核心部分。对于Discuz!论坛程序也是如此，MySQL的设置是否合理优化，

不念不忘少年蓝@/ 2022年05月29日 07:55/ 0 赞/ 212 阅读

相关 MySQL数据库高并发优化配置

` MySQL对于性能的影响最大，也是关键的核心部分。对于Discuz!论坛程序也是如此，MySQL的设置是否合理优化，直接影响到论坛的速度和承载量！同时，MySQL也

待我称王封你为后i/ 2021年12月21日 09:23/ 0 赞/ 308 阅读

相关高并发场景下如何优化服务器的性能？

写在前面最近，有小伙伴在群里提问：Linux系统怎么设置tcp\_nodelay参数？也有小伙伴说问我。那今天，我们就来根据这个问题来聊聊在高并发场景下如何优化服务器的

快来打我*/ 2021年09月07日 06:02/ 0 赞/ 384 阅读

相关理解 %IOWAIT (%WIO)

%iowait 是 “sar -u” 等工具检查CPU使用率时显示的一个指标，在Linux上显示为 %iowait，在有的Unix版本上显示为 %wio，含义都是一样的。这个指

小鱼儿/ 2021年05月12日 11:49/ 0 赞/ 388 阅读