mysql(5)-分区实践

雨点打透心脏的1/2处 2022-06-06 13:23 161阅读 0赞

mysql提供了4中分区方案range，list，hash，key。本次只记录操作的过程，在理论方面暂时没有做记录。会在结束的展示完成之后再做详细的分析。

# 1.创建数据库 #

![这里写图片描述][SouthEast]

# 2.创建数据表 #

创建数据表xks\_driver，指定id为自增，分区为按照id进行hash分区，分区个数为5

![这里写图片描述][SouthEast 1]

# 3.查看表的样式 #

frm：表示表的文件结构  
par：表示分区结构  
xks\_driver做了5个分区，分别是p0p1p2p3p4，分别将会按照hash存储数据到这几个分区中。  
MYD：表示数据存储  
MYI：表示索引存储

![这里写图片描述][SouthEast 2]

# 4.创建索引 #

![这里写图片描述][SouthEast 3]

# 5.插入千万条数据 #

插入数据可以直接使用命令行，如先往数据表中插入几十条数据，然后使用

> insert into xks\_driver (name,password) select name,password from xks\_driver

让数据以2倍的速度不断递增，若干次后增长的速度就会非常快。

![这里写图片描述][SouthEast 4]

当数据量达到2621440的时候，查看文件占用的空间。

![这里写图片描述][SouthEast 5]

继续增加数，直到达到千万级别。在插入的过程中，也可以使用watch命令每隔一个时间执行一次查询显示

> watch -n1 ls -lh

![这里写图片描述][SouthEast 6]

本计划往数据表中插入1千万条左右的数据，一不小心插入了20971520条数据。

![这里写图片描述][SouthEast 7]

此时的数据空间占用如下：

![这里写图片描述][SouthEast 8]

三个字段的表占用了892M的磁盘空间，其中索引基本占用了一半的空间(这里显示索引所占用的空间比数据所占用的空间小，但是实际情况下索引所占用的空间很有可能比数据所占用的空间还要大，甚至大很多)。

# 6.数据查询 #

![这里写图片描述][SouthEast 9]

看到执行的结果，相信大家已经惊呆了吧。在查询一个2千多万行数据的表时，只用了0-0.11秒的时间。

![这里写图片描述][SouthEast 10]

# 7.分区对比 #

<table> 
 <thead> 
  <tr> 
   <th>分区类型</th> 
   <th>优点</th> 
   <th>缺点</th> 
   <th>共性</th> 
  </tr> 
 </thead> 
 <tbody> 
  <tr> 
   <td>range</td> 
   <td>适合于日期类型，支持复合分区</td> 
   <td>有限的分区</td> 
   <td>一般只针对某一列</td> 
  </tr> 
  <tr> 
   <td>list</td> 
   <td>适合于有规定取值的列，支持复合分区</td> 
   <td>有限的分区，插入记录的这一列的值不在list中，则数据会丢失</td> 
   <td>一般只针对某一列</td> 
  </tr> 
  <tr> 
   <td>hash</td> 
   <td>线性hash使增加，删除和合并分区更加快捷</td> 
   <td>线性hash的数据分布不均匀，而一般hash的数据分布较均匀</td> 
   <td>一般只针对某一列</td> 
  </tr> 
  <tr> 
   <td>key</td> 
   <td>列可以为字符型等其他非int类型</td> 
   <td>效率较之前的几种较低，因为函数为复杂的函数</td> 
   <td>一般只针对某一列</td> 
  </tr> 
 </tbody> 
</table>

未完待续……

[SouthEast]: /images/20220606/62736915e5924b2a89807687207fdcd8.png
[SouthEast 1]: /images/20220606/ee037729e419439ca62f9f2885d97e54.png
[SouthEast 2]: /images/20220606/4dbc37764fc143b8b89d5b5881f43367.png
[SouthEast 3]: /images/20220606/eb538982b930477698c48f1647804608.png
[SouthEast 4]: /images/20220606/13e0e76dd43443e1a3bcab0acda1a0c0.png
[SouthEast 5]: /images/20220606/cd7b761b64314c8bb86c75d636b1b0ee.png
[SouthEast 6]: /images/20220606/fda12bcd697f4ae18d5b49b83977b5d1.png
[SouthEast 7]: /images/20220606/0447509ead4b4412a24a8905e6a09293.png
[SouthEast 8]: /images/20220606/ce20fdfbcc1a4500800ddab3d7f4b2aa.png
[SouthEast 9]: /images/20220606/e8d85768f1c44de6979393140537c7df.png
[SouthEast 10]: /images/20220606/e1979b9c0d6d400789e0713bd5594e99.png