KVM Disk Cache模式对性能的影响

淡淡的烟草味﹌ 2022-08-10 11:53 234阅读 0赞

# 操作环境 #

Centos 6.6

qemu-kvm-0.12.1.2

fio 2.0.13

# 操作说明 #

![Center][]

KVM的Disk的Cache模式有3种

*  none
 *  writeback
 *  writethrough

3种cache模式的io路径如上图所示。

此次测试通过fio分别对该3种cache模式进行测试，包括顺序读（sr），顺序写（sw），随机读（rr），随机写（rw）。

测试脚本如下

#!/bin/bash
    function tgt_r {
    fio -filename=/dev/vdb -direct=1 -iodepth 64 -thread -rw=read -ioengine=libaio -bs=$1 -size=100G  -runtime=60 -group_reporting -name=mytest &>> s_r_test
    }
    
    function tgt_w {
    fio -filename=/dev/vdb -direct=1 -iodepth 64 -thread -rw=write -ioengine=libaio -bs=$1 -size=100G  -runtime=60 -group_reporting -name=mytest &>> s_w_test
    }
    
    
    function tgt_rr {
    fio -filename=/dev/vdb -direct=1 -iodepth 64 -thread -rw=randread -ioengine=libaio -bs=$1 -size=100G  -runtime=60 -group_reporting -name=mytest &>> r_r_test
    }
    
    function tgt_rw {
    fio -filename=/dev/vdb -direct=1 -iodepth 64 -thread -rw=randwrite -ioengine=libaio -bs=$1 -size=100G  -runtime=60 -group_reporting -name=mytest &>> r_w_test
    }
    
    tgt_r 512K
    tgt_w 512K
    tgt_rr 512K
    tgt_rw 512K

fio 参数说明

ioengine: 负载引擎，使用libaio，发起异步IO请求。  
bs: IO大小  
direct: 直写，绕过操作系统Cache。  
rw: 读写模式，有顺序写write、顺序读read、随机写randwrite、随机读randread等。  
size: 寻址空间，IO会落在 \[0, size)这个区间的硬盘空间上,一般设置为硬盘的大小。  
filename: 测试对象  
iodepth: 队列深度  
runtime: 测试时长

测试结果

MBPS（KB/s）

![Center 1][]

IOPS

![Center 2][]

latency（ms）

![Center 3][]

通过上述测试可得知，cache mode为none的时候读的性能最佳，cache mode为writeback时候写性能最佳

[Center]: /images/20220810/e2e77e1b2ffc4bd48752bb9c2e9479e9.png
[Center 1]: /images/20220810/e9ce0684468c46428f6bb39c8e9d5a29.png
[Center 2]: https://img-blog.csdn.net/20141121143945608?watermark/2/text/aHR0cDovL2Jsb2cuY3Nkbi5uZXQvYm9icGVu/font/5a6L5L2T/fontsize/400/fill/I0JBQkFCMA==/dissolve/70/gravity/Center
[Center 3]: https://img-blog.csdn.net/20141121144112625?watermark/2/text/aHR0cDovL2Jsb2cuY3Nkbi5uZXQvYm9icGVu/font/5a6L5L2T/fontsize/400/fill/I0JBQkFCMA==/dissolve/70/gravity/Center