关于mysql缓冲和缓存设置介绍

左手的ㄟ右手 2024-03-23 21:27 44阅读 0赞

![50970a72e59fa4263172527ea22835d9.jpeg][]

本文主要给大家讲解的是mysql优化过程中比较重要的2个参数缓冲和缓存的设置，希望大家能够喜欢

MySQL 可调节设置可以应用于整个 mysqld进程，也可以应用于单个客户机会话。

**服务器端的设置**

每个表都可以表示为磁盘上的一个文件，必须先打开，后读取。为了加快从文件中读取数据的过程，mysqld对这些打开文件进行了缓存，其最大数目由 /etc/mysqld.conf 中的table\_cache 指定。清单 4给出了显示与打开表有关的活动的方式。

清单 4. 显示打开表的活动

<table> 
 <tbody> 
 <tr> 
 <td> 1 2 3 4 5 6 7 8 </td> 
 <td> <code>mysql&gt; SHOW STATUS </code><code>LIKE</code> <code>'open%tables'</code><code>;</code> <code>+</code><code>---------------+-------+</code> <code>| Variable_name | Value |</code> <code>+</code><code>---------------+-------+</code> <code>| Open_tables&nbsp; | 5000 |</code> <code>| Opened_tables | 195&nbsp; |</code> <code>+</code><code>---------------+-------+</code> <code>2 </code><code>rows</code> <code>in</code> <code>set</code> <code>(0.00 sec)</code> </td> 
 </tr> 
 </tbody> 
</table>

清单 4 说明目前有 5,000 个表是打开的，有 195个表需要打开，因为现在缓存中已经没有可用文件描述符了（由于统计信息在前面已经清除了，因此可能会存在 5,000 个打开表中只有 195个打开记录的情况）。如果 Opened\_tables 随着重新运行SHOW STATUS 命令快速增加，就说明缓存命中率不够。如果Open\_tables 比table\_cache设置小很多，就说明该值太大了（不过有空间可以增长总不是什么坏事）。例如，使用 table\_cache =5000 可以调整表的缓存。

与表的缓存类似，对于线程来说也有一个缓存。 mysqld在接收连接时会根据需要生成线程。在一个连接变化很快的繁忙服务器上，对线程进行缓存便于以后使用可以加快最初的连接。

清单 5 显示如何确定是否缓存了足够的线程。

清单 5. 显示线程使用统计信息

<table> 
 <tbody> 
 <tr> 
 <td> 1 2 3 4 5 6 7 8 9 10 11 </td> 
 <td> <code>mysql&gt; SHOW STATUS </code><code>LIKE</code> <code>'threads%'</code><code>;</code> <code>+</code><code>-------------------+--------+</code> <code>| Variable_name&nbsp;&nbsp; | Value |</code> <code>+</code><code>-------------------+--------+</code> <code>| Threads_cached&nbsp; | 27&nbsp;&nbsp; |</code> <code>| Threads_connected | 15&nbsp;&nbsp; |</code> <code>| Threads_created&nbsp; | 838610 |</code> <code>| Threads_running&nbsp; | 3&nbsp;&nbsp; |</code> <code>+</code><code>-------------------+--------+</code> <code>4 </code><code>rows</code> <code>in</code> <code>set</code> <code>(0.00 sec)</code> </td> 
 </tr> 
 </tbody> 
</table>

此处重要的值是 Threads\_created，每次mysqld 需要创建一个新线程时，这个值都会增加。如果这个数字在连续执行SHOW STATUS 命令时快速增加，就应该尝试增大线程缓存。例如，可以在my.cnf 中使用 thread\_cache = 40 来实现此目的。

关键字缓冲区保存了 MyISAM 表的索引块。理想情况下，对于这些块的请求应该来自于内存，而不是来自于磁盘。清单 6显示了如何确定有多少块是从磁盘中读取的，以及有多少块是从内存中读取的。

清单 6. 确定关键字效率

<table> 
 <tbody> 
 <tr> 
 <td> 1 2 3 4 5 6 7 8 </td> 
 <td> <code>mysql&gt; show status </code><code>like</code> <code>'%key_read%'</code><code>;</code> <code>+</code><code>-------------------+-----------+</code> <code>| Variable_name&nbsp;&nbsp; | Value&nbsp;&nbsp; |</code> <code>+</code><code>-------------------+-----------+</code> <code>| Key_read_requests | 163554268 |</code> <code>| Key_reads&nbsp;&nbsp;&nbsp;&nbsp; | 98247&nbsp;&nbsp; |</code> <code>+</code><code>-------------------+-----------+</code> <code>2 </code><code>rows</code> <code>in</code> <code>set</code> <code>(0.00 sec)</code> </td> 
 </tr> 
 </tbody> 
</table>

Key\_reads 代表命中磁盘的请求个数，Key\_read\_requests是总数。命中磁盘的读请求数除以读请求总数就是不中比率 —— 在本例中每 1,000 个请求，大约有 0.6 个没有命中内存。如果每1,000 个请求中命中磁盘的数目超过 1 个，就应该考虑增大关键字缓冲区了。例如，key\_buffer =384M 会将缓冲区设置为 384MB。

临时表可以在更高级的查询中使用，其中数据在进一步进行处理（例如 GROUPBY字句）之前，都必须先保存到临时表中；理想情况下，在内存中创建临时表。但是如果临时表变得太大，就需要写入磁盘中。清单 7给出了与临时表创建有关的统计信息。

清单 7. 确定临时表的使用

<table> 
 <tbody> 
 <tr> 
 <td> 1 2 3 4 5 6 7 8 9 10 </td> 
 <td> <code>mysql&gt; SHOW STATUS </code><code>LIKE</code> <code>'created_tmp%'</code><code>;</code> <code>+</code><code>-------------------------+-------+</code> <code>| Variable_name&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; | Value |</code> <code>+</code><code>-------------------------+-------+</code> <code>| Created_tmp_disk_tables | 30660 |</code> <code>| Created_tmp_files&nbsp;&nbsp;&nbsp; | 2&nbsp;&nbsp; |</code> <code>| Created_tmp_tables&nbsp;&nbsp; | 32912 |</code> <code>+</code><code>-------------------------+-------+</code> <code>3 </code><code>rows</code> <code>in</code> <code>set</code> <code>(0.00 sec)</code> </td> 
 </tr> 
 </tbody> 
</table>

每次使用临时表都会增大 Created\_tmp\_tables；基于磁盘的表也会增大 Created\_tmp\_disk\_tables。对于这个比率，并没有什么严格的规则，因为这依赖于所涉及的查询。长时间观察Created\_tmp\_disk\_tables会显示所创建的磁盘表的比率，您可以确定设置的效率。 tmp\_table\_size和 max\_heap\_table\_size都可以控制临时表的最大大小，因此请确保在 my.cnf 中对这两个值都进行了设置。

**每个会话 的设置**

下面这些设置针对于每个会话。在设置这些数字时要十分谨慎，因为它们在乘以可能存在的连接数时候，这些选项表示大量的内存！您可以通过代码修改会话中的这些数字，或者在 my.cnf 中为所有会话修改这些设置。

当 MySQL必须要进行排序时，就会在从磁盘上读取数据时分配一个排序缓冲区来存放这些数据行。如果要排序的数据太大，那么数据就必须保存到磁盘上的临时文件中，并再次进行排序。如果 sort\_merge\_passes状态变量很大，这就指示了磁盘的活动情况。清单 8 给出了一些与排序相关的状态计数器信息。

清单 8. 显示排序统计信息

<table> 
 <tbody> 
 <tr> 
 <td> 1 2 3 4 5 6 7 8 9 10 </td> 
 <td> <code>mysql&gt; SHOW STATUS </code><code>LIKE</code> <code>"sort%"</code><code>;</code> <code>+</code><code>-------------------+---------+</code> <code>| Variable_name&nbsp;&nbsp; | Value&nbsp; |</code> <code>+</code><code>-------------------+---------+</code> <code>| Sort_merge_passes | 1&nbsp;&nbsp;&nbsp; |</code> <code>| Sort_range&nbsp;&nbsp;&nbsp; | 79192&nbsp; |</code> <code>| Sort_rows&nbsp;&nbsp;&nbsp;&nbsp; | 2066532 |</code> <code>| Sort_scan&nbsp;&nbsp;&nbsp;&nbsp; | 44006&nbsp; |</code> <code>+</code><code>-------------------+---------+</code> <code>4 </code><code>rows</code> <code>in</code> <code>set</code> <code>(0.00 sec) </code> </td> 
 </tr> 
 </tbody> 
</table>

如果 sort\_merge\_passes 很大，就表示需要注意sort\_buffer\_size。例如，sort\_buffer\_size = 4M 将排序缓冲区设置为 4MB。

MySQL也会分配一些内存来读取表。理想情况下，索引提供了足够多的信息，可以只读入所需要的行，但是有时候查询（设计不佳或数据本性使然）需要读取表中大量数据。要理解这种行为，需要知道运行了多少个 SELECT语句，以及需要读取表中的下一行数据的次数（而不是通过索引直接访问）。实现这种功能的命令如清单 9 所示。

清单 9. 确定表扫描比率

<table> 
 <tbody> 
 <tr> 
 <td> 1 2 3 4 5 6 7 8 9 10 11 12 13 14 </td> 
 <td> <code>mysql&gt; SHOW STATUS </code><code>LIKE</code> <code>"com_select"</code><code>;</code> <code>+</code><code>---------------+--------+</code> <code>| Variable_name | Value |</code> <code>+</code><code>---------------+--------+</code> <code>| Com_select&nbsp; | 318243 |</code> <code>+</code><code>---------------+--------+</code> <code>1 row </code><code>in</code> <code>set</code> <code>(0.00 sec)</code> <code>mysql&gt; SHOW STATUS </code><code>LIKE</code> <code>"handler_read_rnd_next"</code><code>;</code> <code>+</code><code>-----------------------+-----------+</code> <code>| Variable_name&nbsp;&nbsp;&nbsp;&nbsp; | Value&nbsp;&nbsp; |</code> <code>+</code><code>-----------------------+-----------+</code> <code>| Handler_read_rnd_next | 165959471 |</code> <code>+</code><code>-----------------------+-----------+</code> <code>1 row </code><code>in</code> <code>set</code> <code>(0.00 sec)</code> </td> 
 </tr> 
 </tbody> 
</table>

Handler\_read\_rnd\_next /Com\_select 得出了表扫描比率 —— 在本例中是 521:1。如果该值超过4000，就应该查看 read\_buffer\_size，例如read\_buffer\_size = 4M。如果这个数字超过了8M，就应该与开发人员讨论一下对这些查询进行调优了！

查看数据库缓存配置情况

配置方法：

在MYSQL的配置文件my.ini或my.cnf中找到如下内容：

<table> 
 <tbody> 
 <tr> 
 <td> 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 </td> 
 <td> <code># Query cache is used to cache SELECT results and later returnthem</code> <code># without actual executing the same query once again. Having thequery</code> <code># cache enabled may result in significant speed improvements, ifyour</code> <code># have a lot of identical queries and rarely changing tables.See the</code> <code># "Qcache_lowmem_prunes" status variable to check if the currentvalue</code> <code># is high enough for your load.</code> <code># Note: In case your tables change very often or if your queriesare</code> <code># textually different every time, the query cache may result ina</code> <code># slowdown instead of a performance improvement.</code> <code>query_cache_size=0</code> </td> 
 </tr> 
 </tbody> 
</table>

以上信息是默认配置，其注释意思是说，MYSQL的查询缓存用于缓存select查询结果，并在下次接收到同样的查询请求时，不再执行实际查询处理而直接返回结果，有这样的查询缓存能提高查询的速度，使查询性能得到优化，前提条件是你有大量的相同或相似的查询，而很少改变表里的数据，否则没有必要使用此功能。可以通过Qcache\_lowmem\_prunes变量的值来检查是否当前的值满足你目前系统的负载。注意：如果你查询的表更新比较频繁，而且很少有相同的查询，最好不要使用查询缓存。

具体配置方法：

1． 将`query_cache_size`设置为具体的大小，具体大小是多少取决于查询的实际情况，但最好设置为1024的倍数，参考值32M。

2． 增加一行：`query_cache_type=1`

query\_cache\_type参数用于控制缓存的类型，注意这个值不能随便设置，必须设置为数字，可选项目以及说明如下：

如果设置为0，那么可以说，你的缓存根本就没有用，相当于禁用了。但是这种情况下query\_cache\_size设置的大小系统是否要为其分配呢，这个问题有待于测试？

如果设置为1，将会缓存所有的结果，除非你的select语句使用SQL\_NO\_CACHE禁用了查询缓存。

如果设置为2，则只缓存在select语句中通过SQL\_CACHE指定需要缓存的查询。

OK，配置完后的部分文件如下：

<table> 
 <tbody> 
 <tr> 
 <td> 1 2 3 </td> 
 <td> <code>query_cache_size=128M</code> <code>query_cache_type=1</code> </td> 
 </tr> 
 </tbody> 
</table>

保存文件，重新启动MYSQL服务，然后通过如下查询来验证是否真正开启了：

<table> 
 <tbody> 
 <tr> 
 <td> 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 </td> 
 <td> <code>mysql&gt; show variables </code><code>like</code> <code>'%query_cache%'</code><code>;</code> <code>+——————————+———–+</code> <code>| Variable_name&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; |Value&nbsp; |</code> <code>+——————————+———–+</code> <code>| have_query_cache&nbsp;&nbsp;&nbsp;&nbsp; |YES&nbsp;&nbsp; |</code> <code>| query_cache_limit&nbsp;&nbsp;&nbsp;&nbsp; |1048576&nbsp; |</code> <code>| query_cache_min_res_unit&nbsp; |4096&nbsp;&nbsp; |</code> <code>| query_cache_size&nbsp;&nbsp;&nbsp;&nbsp; | 134217728|</code> <code>| query_cache_type&nbsp;&nbsp;&nbsp;&nbsp; |</code><code>ON</code>&nbsp;&nbsp;&nbsp; <code>|</code> <code>| query_cache_wlock_invalidate | </code><code>OFF</code>&nbsp;&nbsp; <code>|</code> <code>+——————————+———–+</code> <code>6 </code><code>rows</code> <code>in</code> <code>set</code> <code>(0.00 sec)</code> </td> 
 </tr> 
 </tbody> 
</table>

主要看query\_cache\_size和query\_cache\_type的值是否跟我们设的一致：

这里query\_cache\_size的值是134217728，我们设置的是128M，实际是一样的，只是单位不同，可以自己换算下：134217728 = 128\*1024\*1024。

query\_cache\_type设置为1，显示为ON，这个前面已经说过了。

总之，看到上边的显示表示设置正确，但是在实际的查询中是否能够缓存查询，还需要手动测试下，我们可以通过show statuslike '%Qcache%';语句来测试，现在我们开启了查询缓存功能，在执行查询前，我们先看看相关参数的值：

转自：[微点阅读][Link 1] [https://www.weidianyuedu.com][Link 1]

[50970a72e59fa4263172527ea22835d9.jpeg]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/14/37f39e2c1c7b49159560a98b2f439471.png
[Link 1]: https://www.weidianyuedu.com