导读 目前的迁移技术,都是通过向QEMUFILE中直接写入裸内存数据来达到传送虚拟机的目的端,这种情况下,发送的数据量大,从而会导致更高的迁移时间(total time)和黑宕时间(downtime)。本文介绍的方法,在发送前对客户机内存进行压缩,在目的端接收到内存后,进行对数据进行解压缩,从而恢复客户机的内存。
1.技术原理

使用带压缩技术的迁移后,传输的数据总量会减少60%,总迁移时间减少70%+,同时宕机时间减少50%以上。一方面,压缩/解压缩的过程会消耗CPU周期而加大了迁移的时间;另一方面,总传输数据量的锐减,又会减少迁移时间。为了能够进行高速的压缩,本技术中使用了多线程并发的方式,提高压缩的目前虚拟机中,使用ZLIB完成压缩/解压缩的工作。

在CPU相同的情况下,ZLIB官方给出,解压缩的速度是压缩速度的4倍。也就是说,如果迁移的源端和目的端处理器相同的情况下,使得压缩线程数量是解压缩线程数量的4倍就可以在资源消耗最小的情况下,取得最优的压缩为了更多的适应网络状况,虚拟机中引入了压缩级别 -- Compression level。Compression level可以用来控制压缩速率和压缩比例。高的压缩比率会消耗更多的时间,level 0就代表不进行压缩, 1级代表最优的压缩速率, 9级代表了最好的压缩比率(最多的压缩时间)。我们可以选择从0级到9级中的任意一个级别。

2. 多线程压缩动态迁移技术的应用场景

压缩/解压缩时间将会消耗CPU周期。所以,如果整个系统CPU都被压得非常满的情况下,避免使用这个特性。当网络带宽有限,CPU资源又足够充足的情况下,使用多线程压缩动态迁移技术会带来比较好的效果。当网络充足且CPU资源充足的情况下,使用本技术也将会减少总迁移时间。

3. 多线程压缩迁移技术使能方法
源端:

1. 启动虚拟机

/home/liufeng/qemu-system-x86_64 -machine accel=kvm -hda ./disk0.img -m 2048 -vnc 192.168.2.106:0 -monitor stdio

2. 使能源端多线程压缩动态迁移技术

a.) migrate_set_capabilitycompress on //使能压缩
b.) migrate_set_parametercompress-threads 12 //12个压缩线程
c.) migrate_set_parametercompress-level 1 //压缩级别为1级

3. 开始迁移

migrate -d tcp:192.168.2.105:6666
目的端:

1. 启动虚拟机

/home/liufeng/qemu-system-x86_64 -machine accel=kvm -hda /home/kvm/vm/disk/disk0.img -m 2048 -vnc 192.168.2.105:0 -monitor stdio -incoming tcp:192.168.2.105:6666

2. 使能目的端多线程压缩动态迁移技术

a.) migrate_set_capabilitycompress on
b.) migrate_set_parametercompress-level 1
c.) migrate_set_parameterdecompress-threads 3 //3个压缩线程

3. 等待迁移完成

4. 效果验证
运行环境:

CPU: Intel(R) Xeon(R) CPU E5-2650 v3 @2.30GHz
Logic core: 40
Socket : 2
RAM: 128G
NIC: 1000baseT/Full
Host OS: CentOSLinux release 7.2.1511 (Core) 64-bit
Guest OS: CentOS Linux release 7.2.1511 (Core) 64-bit

a. 情况一:带宽无限制,CPU充足
  原动态迁移 多线程压缩技术动态迁移

压缩级别: 1

压缩线程数: 12

解压缩线程数:3

迁移总时间(msec): 9536 4466
Downtime时间(msec): 34 22
传输数据量(KB) 307783 140445

效果:总的迁移时间减少50%;downtime时间减少35%

b. 情况二:带宽有限制情况,CPU充足
  原动态迁移 多线程压缩技术动态迁移

压缩级别: 1

压缩线程数: 12

解压缩线程数:3

迁移总时间(msec): 11720 5652
Downtime时间(msec): 169 21
传输数据量(KB) 311554 140189

效果:总迁移时间减少了200%,downtime时间减少了800%

5. 代码实现分析

虚拟机实现代码分析如下(本分析基于:QEMU 2.5):

1. 在启动migration过程中,如果发现使能了多线程压缩技术,则创建压缩线程

2. 迁移开始后,使用多线程压缩技术

有migration_thread()进行迁移工作,在iterator和complete阶段,如果发现使能了多线程压缩技术,则通过compress_page_with_multi_thread()完成数据的压缩和发送

3. 通过zlib的compress2()函数完成数据的压缩,并通过QEMU-FILE发送

最终在compress_page_with_multi_thread()中激活压缩线程,通过zlib的compress2()函数完成数据的压缩,并通过QEMU-FILE发送

6. 可优化点

1. 压缩算法

a. 目前使用的是开源zlib库完成压缩,还有其他压缩库的压缩方式可以提供,以便适应更多的场景

b. 商业压缩库有着更好的效率

c. 通过FPGA进行硬件辅助压缩

2. 压缩策略

a. 虚拟机迁移算法自适应所有网络,对网络进行测试(是否满足上面的公式),然后形成反馈因子输入到迁移算法中,迁移算法根据反馈因子决定使用的压缩算法、压缩级别或者根本不压缩,达到在所有网络状况下而缩短downtime的目的。

转载于:https://www.cnblogs.com/linux130/p/5501368.html

QEMU-KVM中的多线程压缩迁移技术相关推荐

  1. 虚拟机迁移技术漫谈(转)

    http://www.ibm.com/developerworks/cn/linux/l-cn-mgrtvm1/index.html 如何在虚拟机和物理机以及虚拟机和虚拟机之间的迁移系统 虚拟机迁移技 ...

  2. KVM之使用libvirt迁移QEMU/KVM、Nova虚机

    学习 KVM 的系列文章:  (1)介绍和安装 (2)CPU 和 内存虚拟化 (3)I/O QEMU 全虚拟化和准虚拟化(Para-virtulizaiton) (4)I/O PCI/PCIe设备直接 ...

  3. 8.使用 libvirt 迁移 QEMU/KVM 虚机和 Nova 虚机 [Nova Libvirt QEMU/KVM Live Migration]

    1. QEMU/KVM 迁移的概念 迁移(migration)包括系统整体的迁移和某个工作负载的迁移.系统整理迁移,是将系统上所有软件包括操作系统完全复制到另一个物理机硬件机器上.虚拟化环境中的迁移, ...

  4. KVM 介绍(8):使用 libvirt 迁移 QEMU/KVM 虚机和 Nova 虚机 [Nova Libvirt QEMU/KVM Live Migration]...

    学习 KVM 的系列文章: (1)介绍和安装 (2)CPU 和 内存虚拟化 (3)I/O QEMU 全虚拟化和准虚拟化(Para-virtulizaiton) (4)I/O PCI/PCIe设备直接分 ...

  5. 【KVM系列08】使用 libvirt 迁移 QEMU/KVM 虚机和 Nova 虚机

    第八章 使用 libvirt 迁移 QEMU/KVM 虚机和 Nova 虚机 1. QEMU/KVM 迁移的概念 1.1 迁移效率的衡量 1.2 KVM 迁移的原理 1.3 使用命令行的方式做动态迁移 ...

  6. KVM(八)使用 libvirt 迁移 QEMU/KVM 虚机和 Nova 虚机

    1. QEMU/KVM 迁移的概念 迁移(migration)包括系统整体的迁移和某个工作负载的迁移.系统整理迁移,是将系统上所有软件包括操作系统完全复制到另一个物理机硬件机器上.虚拟化环境中的迁移, ...

  7. 通过virt-v2v将VMware ESXi 5中的vm迁移至kvm中

    环境说明 Vmware Esxi 5.5 virt-v2v 1.28 kvm host:Centos 7.2 vm:Windows Server 2003 在很多文章中看见过通过virt-v2v连接e ...

  8. Android 开发中的多线程编程技术

    此文章来自"Intel Software"应用开发 多线程这个令人生畏的"洪水猛兽",很多人谈起多线程都心存畏惧.在Android开发过程中,多线程真的很难吗? ...

  9. Android开发中的多线程编程技术

    Android开发中的多线程编程技术 [IT168技术]多线程这个令人生畏的"洪水猛兽",很多人谈起多线程都心存畏惧.在Android开发过程中,多线程真的很难吗?多线程程序的&q ...

最新文章

  1. MAML-Tracker: 目标跟踪分析:CVPR 2020(Oral)
  2. VC2005与IE8的冲突解决
  3. Flask项目中应用七牛云存储
  4. Linux中断线程化的优势,记一个实时Linux的中断线程化问题
  5. python猜词游戏源代码_Python趣味小游戏编写教学
  6. excel制作录入和查询系统_叮咚!您有一份Excel人员信息查询系统,请您查收~
  7. FISCO BCOS 区块链 学习开发步骤
  8. LaTeX常用的符号
  9. java学习网站大全
  10. Win10安装ST-Link驱动--无需下载驱动
  11. 华为云计算hcip证书有效期_华为云计算HCIP V4.0认证要发布了!
  12. 单个索引和组合索引(联合索引)谁效率高
  13. 评测 AlibabaCloud 阿里云国际版 香港轻量云服务器的性能和网络怎么样
  14. 如何“延迟加载”嵌入式YouTube视频
  15. ps钢笔路径打不出字怎么解决?
  16. 输入存款金额并选择存款种类,计算出利息(不计利息税)和本息合计
  17. MAC 打开所有来源的程序
  18. 打开电脑自带字符映射表
  19. 小程序 timestamp_通过构建Timestamp微服务应用程序来学习Node.js
  20. Nginx:rewrite指令(break,last,redirect,permanent)

热门文章

  1. MRI炎症和结构损伤指标对TNF拮抗剂治疗AS患者获持续缓解的预测价值
  2. ccna____总结
  3. 如何在大学和工作后让自己逐渐变强?
  4. 在苏州当老师大概博士毕业,工作稳定后就准备要孩子了
  5. OpenV P N + AD(Ldap) + GoogleAuth认证安装
  6. X.509 数字证书结构和实例
  7. JS 原型链 prototypt 和隐式原型 _proto_
  8. 使用百度地图实现详细地址自动补全
  9. pdf.js 在线浏览pdf组件构建与安装注意事项
  10. Visual Studio调试之断点技巧篇