KVM虚拟化性能优化

精选转载

fccwcom 2013-02-23 13:59:30

可从以下几个方面优化KVM虚拟机，提高虚拟机的性能。

1、全虚拟化使用半虚拟化驱动（virtio)

virtio是KVM的半虚拟化机制,可提高IO性能,使用virtio可心显著提高KVM性能。virtio包括磁盘驱动和网卡驱动，下面是在XML文件中的使用方法：

磁盘配置文件：

网卡配置文件：

2、使用writeback缓存选项

针对客户机块设备的缓存,drive有一个子选项cache来设置缓存模式。两个主要的选项为writeback和writethrough,man手册是这样说的

By default, writethrough caching is used for all block device. This means that the host page cache will be used to read and write data but write notification will be sent to the guest only when the data has been reported as written by the storage subsystem.

Writeback caching will report data writes as completed as soon as the data is present in the host page cache. This is safe as long as you trust your host. If your host crashes or loses power, then the guest may experience data corruption.

writethrough写操作时不使用主机的缓存,只有当主机接受到存储子系统写操作通知时，宿主机才通知客户机写操作,也就是说这是同步的。而writeback则是异步的,它是当客户机有写请求时，先将数据写入宿主机缓存,而此时主机并未将数据真正写入存储系统。之后,待合适的时机主机会真正的将数据写入存储。显然writeback会更快。

这样使用writeback选项：

3、客户机的磁盘IO调度策略

客户机上的磁盘只不过是宿主机的一个文件,所以其IO调度并无太大意义,反而会影响IO效率,所以可以通过将客户机的IO调度策略设置为NOOP来提高性能。NOOP就是一个FIFO队列,不做IO调度。可以通过给内核传递一个参数来使用NOOP调度策略

编辑文件/boot/grub/grub.conf,在kernel那行加入elevator=noop

宿主机调度方式改为：deadline deadline是通过时间以及硬盘区域进行分类,这个分类和合并要求类似于noop的调度程序。确保了在一个截止时间内服务请求,默认读期限短于写期限.这样就防止了写操作因为不能被读取而饿死的现象。

4、打开KSM(Kernel Samepage Merging)

页共享在内核2.6.32之后又引入了KSM。KSM特性可以让内核查找内存中完全相同的内存页然后将他们合并,并将合并后的内存页打上COW标记。KSM对KVM环境有很重要的意义,当KVM上运行许多相同系统的客户机时,客户机之间将有许多内存页是完全相同的,特别是只读的内核代码页完全可以在客户机之间共享,从而减少客户机占用的内存资源,从而可以同时运行更多的客户机。

CentOS默认没有开启KSM，如果KVM要使用KSM那必要安装：qemu-common。

开启KSM服务：service ksm start

service ksmtuned start

通过/sys/kernel/mm/ksm目录下的文件来查看内存页共享的情况,pages_shared文件中记录了KSM共享的总页面数，pages_sharing文件中记录了当前共享的页面数。每个页面的大小为4KB 可计算出共享内在为：4X页面数=内存大小（K)

KSM会稍微的影响系统性能,以效率换空间,如果系统的内存很宽裕,则无须开启KSM,如果想尽可能多的并行运行KVM客户机,则可以打开KSM。

5、KVM Huge Page Backed Memory

通过为客户机提供巨页后端内存,减少客户机消耗的内存并提高TLB命中率,从而提升KVM性能。x86 CPU通常使用4K内存页,但也有能力使用更大的内存页,x86_32可以使用4MB内存页，x86_64和x86_32 PAE可以使用2MB内存页。x86使用多级页表结构,一般有三级,页目录表->页表->页,所以通过使用巨页,可以减少页目录表和也表对内存的消耗。当然x86有缺页机制,并不是所有代码、数据页面都会驻留在内存中。

首先挂装hugetlbfs文件系统

#mkdir /hugepages
#mount -t hugetlbfs hugetlbfs /hugepages

然后指定巨页需要的内存页面数
#sysctl vm.nr_hugepages=xxx

客户机的XML配置文件使用巨页来分配内存：

或用命令行方式：

qemu-kvm -mem-path /hugepages

让系统开机自动挂载hugetlbfs文件系统,在/etc/fstab中添加
hugetlbfs /hugepages hugetlbfs defaults 0 0

在/etc/sysctl.conf中添加如下参数来持久设定巨页文件系统需要的内存页面数
vm.nr_hugepages=xxx

巨页文件系统需要的页面数可以由客户机需要的内存除以页面大小也就是2M来大体估算。

查看巨页内存信息：cat /proc/meminfo |grep Hug

AnonHugePages: 253120 kB
HugePages_Total: 2000
HugePages_Free: 904
HugePages_Rsvd: 0
HugePages_Surp: 0
Hugepagesize: 2048 kB