OpenCloudOS 轻量级虚拟化引擎 LiKeX 介绍

2023-03-09
广东
本文字数：3534 字
阅读完需：约 12 分钟

虚拟化技术是云计算的基础，目前大量的公有云以及私有云环境都选择 KVM 作为 Hypervisor。KVM 作为 Type 2 型的系统级硬件辅助虚拟化技术的典型方案，相对于 Xen 的优势有：

KVM 作为一个 Linux 内核模块方式实现，因此其硬件生态兼容性、扩展性较好；KVM 中没有实现调度等功能，而是依赖 Linux 内核的实现，如 Linux 的调度器，实现充分利用了 Linux 内核的成熟模块，实现相对精简。

但是随着 FaaS、Serverless 等新场景的出现，KVM 现有的实现就显得复杂了。新的场景趋向于以容器为中心，虚拟化技术在新的场景中主要的作用是弥补传统容器技术的隔离性不足的问题。因此对于 KVM 技术有进一步轻量化的需求。

Rust 作为内存安全语言已经被业界广泛认可。但 Rust 语言不只是追求安全，而且在并发和性能方面也有很好的表现，因此 Rust 不仅被很多大公司如 AWS、微软、Google 等用于应用软件的开发，而且其已经用于构建操作系统，比如 Redox OS。

Rust 也逐渐成为未来底层软件开发的首选语言。目前 Rust 已经被 Linux 内核开源社区接受作为开发语言，主要用于 Linux 内核驱动模块的开发。

一、Why LiKeX ？

LiKeX 是一个对 KVM 的 Rust 重构项目，但又不仅仅是简单的重构。

LiKeX 中的「Li」代表轻量，「K」代表 KVM，「e」代表 extension，「X」是一个统一的后缀对于下一代云原生 OS 项目。

LiKeX 项目开发的目标是针对 FaaS 场景，提供轻量化的 Hypervisor 解决方案。在架构设计上，考虑到 FaaS 应用的特点：单实例短生命周期，单实例资源占用低，高实例密度，因此 LiKeX 在不少设计上与 KVM 有较大差异，部分对比项如下：

同时 LiKeX 在设计上尽量保持用户态接口与 KVM 兼容或者最小修改，这样对于基于 KVM 的设备模拟组件 VMM 可以较容易的迁移到 LiKeX 上。

二、LiKeX 现状

目前，LiKeX 项目已经开源到 OpenCloudOS 社区并在社区内进行持续演进，同时， LiKeX 项目已经实现阶段性目标，可以加载一段用户态程序到 Guest 态运行，并支持多个 memslot。

测试程序(精简)：

//Guest态运行的程序const unsigned char code[] = {            0xba, 0xf8, 0x03, /* mov $0x3f8, %dx */            0x00, 0xd8,       /* add %bl, %al */            0x04, '0',        /* add $'0', %al */            0xee,             /* out %al, (%dx) */            0xb0, '\n',       /* mov $'\n', %al */            0xee,             /* out %al, (%dx) */            0xf4,            /* hlt */ };//Guest内存区域struct kvm_userspace_memory_region region = {                .slot = 0,                .flags = 0,                .guest_phys_addr = 0,                 .memory_size = 0x1000,};
struct kvm_regs regs = {                .rip = 0,                 .rax = 2,                .rbx = 2,                .rflags = 0x2,};
void main(void){  fd = open("/dev/rust_kvm",O_RDWR); //打开rust_kvm设备  ret = ioctl(fd, KVM_CREATE_VM, 0);//创建虚拟机  mem = (unsigned long)mmap(NULL, 0x1000, PROT_READ | PROT_WRITE | PROT_EXEC, MAP_SHARED | MAP_ANONYMOUS, -1, 0);  memset((char*)mem, 0, 4096);  memcpy((char *)mem, code, sizeof(code));//拷贝Guest态代码到当前进程某段地址空间  region.userspace_addr = (uint64_t)mem;  ret = ioctl(fd, KVM_SET_USER_MEMORY_REGION, &region);//传递Guest地址空间到内核部分到rust_kvm  ret = ioctl(fd, KVM_CREATE_VCPU, 0); //创建VCPU  run = (struct kvm_run *)mmap(NULL, 0x1000, PROT_READ | PROT_WRITE, MAP_SHARED, fd, 0);  memset((char*)&sregs, 0, sizeof(sregs));  ioctl(fd, KVM_GET_SREGS, &sregs);  sregs.cs.base = 0;  sregs.cs.selector = 0;  ioctl(fd, KVM_SET_SREGS, &sregs);  ioctl(fd, KVM_SET_REGS, &regs);  ioctl(fd, KVM_GET_REGS, &regs);         while (loop0 < 8) {                ioctl(fd, KVM_RUN, NULL); //进入Guest态运行                switch (run->exit_reason) {//从Guest态退出，根据退出原因在用户态调用对应处理函数                        /* Handle exit */                        case KVM_EXIT_HLT:                                return;                        case KVM_EXIT_IO:                                if (run->io.direction == KVM_EXIT_IO_OUT &&                                        run->io.size == 1 &&                                        run->io.port == 0x3f8 &&                                        run->io.count == 1)                                        printf("exit io:%c \n", (*(((char *)run) + run->io.data_offset)));                                break;                        case KVM_EXIT_FAIL_ENTRY:                                printf(" fail entry\n");                                memset((char*)&regs, 0, sizeof(regs));                                ioctl(fd, KVM_GET_REGS, &regs);                                return;                        case KVM_EXIT_INTERNAL_ERROR:                                printf(" internal error\n");                                return;                        default:                                printf(" default:0x%x\n", run->exit_reason);                                return;                }              loop0++;        }}

复制代码

内核部分运行结果：

rust_kvm: Rust KVM Openrust_kvm: Rust kvm: vmcs=ffff888110f02000,revision=4rust_kvm: written new cr4 valuerust_kvm: Rust kvm: IOCTL_KVM_CREATE_VMrust_kvm: Rust kvm: IOCTL_KVM_SET_USER_MEMORY_REGIONrust_kvm:  add_memory_region slot= 0,uaddr=7f531f3e5000, gpa = 0, npages=1rust_kvm: Rust kvm: IOCTL_KVM_CREATE_VCPUrust_kvm: RkvmMmu hpa(va) = ffff88811d6ed000rust_kvm: RkvmMmu hpa(phy) = 11d6ed000rust_kvm: ad_disabled = false, ecex_only = truerust_kvm:  setup pin=17,cpu=a581e5f2, cpu2=82,exit=3fefff, entry=d1ffrust_kvm:   pin_based = 17rust_kvm:   cpu_based = a581e5f2rust_kvm:   cpu_2nd_based = 82rust_kvm:  vcpu_vmcs_initrust_kvm:  init_mmu_rootrust_kvm: hpa= 11d6ed000, eptp = 11d6ed01erust_kvm: Rust kvm: IOCTL_KVM_CREATE_VCPU finishrust_kvm: Rust KVM mmaprust_kvm: Rust kvm: IOCTL_KVM_GET_SREGSrust_kvm: Rust kvm: IOCTL_KVM_VCPU_RUNrust_kvm:  vcpu_run state guest rip = 0, read guest rip = 0rust_kvm:  vmentry: launched = falserust_kvm: Enter handle EPT violationrust_kvm: pagefault: pfn=1999950rust_kvm: rkvm_tdp_map level=4, gfn=0, spte=14a55c907rust_kvm: rkvm_tdp_map level=3, gfn=0, spte=1567bf907rust_kvm: rkvm_tdp_map level=2, gfn=0, spte=11bcc5907rust_kvm: rkvm_tdp_map level=1, gfn=0, spte=6000001e844eb07rust_kvm: ret=Ok(1),after vcpu_exit_handlerrust_kvm:  vmentry: launched = truerust_kvm:  vmexit: guest_rip=7rust_kvm:  handle_io port =3f8rust_kvm: ret=Ok(0), after vcpu_exit_handlerrust_kvm:  vmentry: launched = truerust_kvm:  vmexit: guest_rip=9rust_kvm:  handle hltrust_kvm: ret=Ok(0), after vcpu_exit_handler