“翼”鸣惊人 天翼云两篇论文被 ACM ICPP 2024 收录
近日,由天翼云科技有限公司弹性计算产品线天玑实验室独立撰写的两篇论文《PheCon: Fine-Grained VM Consolidation with Nimble Resource Defragmentation in Public Cloud Platforms》及《Yggdrasil: Reducing Network I/O Tax with (CXL-Based) Distributed Shared Memory》被 ACM International Conference on Parallel Processing(ICPP)收录。
![](https://static001.geekbang.org/infoq/d8/d888142af2a0b9549d0d6a4dd13b0140.jpeg?x-oss-process=image%2Fresize%2Cp_80%2Fauto-orient%2C1)
ACM ICPP 是计算机体系结构、并行与分布计算、存储系统领域的顶级会议之一,也是世界上最古老的连续举办的并行计算国际会议之一。ACM ICPP 收录论文均经过严格的同行双盲评审,近五年平均接收率为 27.9%。此次天玑实验室两篇论文的成功收录,既是顶级权威机构对天翼云技术创新能力的认可,也是中国企业在国际学术舞台影响力日益增强的有力证明。
本次收录的两篇论文分别阐述了天翼云天玑实验室团队自主设计与研发的两大创新成果,包括面向大规模云数据中心管理的智能资源调度技术——PheCon 和基于“聚合计算”产品理念的面向新一代云计算基础设施的网络 I/O 加速技术——Yggdrasil。
PheCon:细粒度云数据中心智能资源碎片整理算法
在云计算场景下,由于数据中心负载水平的波动性和需求的不确定性,各个物理服务器普遍存在资源碎片问题,造成数据中心资源浪费。如图 1 所示,客户需要紧急开通 6 台指定规格的云服务器,但集群内剩余资源只能满足 4 台云服务器,形成典型的资源碎片现象。如何应对资源扩容中常见的周期长、成本高等挑战,满足极端场景下的客户需求,成为亟需解决的难题。
![](https://static001.geekbang.org/infoq/cc/ccb83dea9295ddc7953f612b1acd1e2b.jpeg?x-oss-process=image%2Fresize%2Cp_80%2Fauto-orient%2C1)
![](https://static001.geekbang.org/infoq/60/60a86fdd28f24b0673887ce7b321fa06.jpeg?x-oss-process=image%2Fresize%2Cp_80%2Fauto-orient%2C1)
图 1. 碎片整理示意图
本论文创新性提出一种新型细粒度碎片整理算法——PheCon,通过云服务器二次调度的方式聚合集群内资源碎片,以满足更大规格资源的开通需求。同时,该论文还提出了基于分治思想的 NUMA 感知启发式算法和“诱导迁移”(Induced Migration)技术,通过规格填充、物理服务器选择、云服务器排序和 NUMA 调度,实现集群布局优化。
基于上述技术特点,PheCon 可适配天翼云“2+4+31+X”的资源布局和异构数据中心的异构资源特点,做到一池一算、算无遗策,满足全域异构资源的二次调度,实现分钟级的快速碎片整理,提供优质的上云体验。目前,天玑智能调度平台稳定运行 PheCon 碎片整理功能,累计提供服务 72 次,每年节省运营成本超过千万元,减少碳排放超百吨。
Yggdrasil:CXL 使能的无感网络 I/O 性能加速
在通信密集型应用程序的运行过程中,基于 Linux 内核的操作系统网络通讯组件面临巨大的运行负担。为有效解决上述问题,本论文提出 Yggdrasil 网络通讯平替方案。
Yggdrasil 是天翼云聚合计算团队预研的下一代数据中心网络通信技术。如图 2 所示,该技术可基于 CXL 共享内存实现用户态的高性能 TCP/IP 通信,且完全兼容现有的 socket API,无需修改代码即可完成性能加速。天玑实验室团队通过模拟和真实 CXL 硬件进行评估的结果表明,Yggdrasil 可使 Memcached 的吞吐性能相比传统 Linux socket 高出 8.2 倍,并在不同消息大小的微基准测试中,将通讯延迟降低到传统方式的 0.3%到 4.1%。
![](https://static001.geekbang.org/infoq/99/99d1fb40db75d7b4bb463260951f68b1.jpeg?x-oss-process=image%2Fresize%2Cp_80%2Fauto-orient%2C1)
图 2. 关于 Yggdrasil 快速/慢速通信路径示意图
Yggdrasil 的性能优势与易用性主要得益于三个方面的设计优化:
(1)在跨主机通信中,Yggdrasil 采用基于 CXL 的分布式共享内存(即快速通信路径)以提升性能,在 CXL 不可用的情况下,自动无感切换回传统 socket(即慢速通信路径)。
(2)Yggdrasil 依托于受信任的用户空间监控守护进程管理通讯连接控制平面操作,减少上下文切换开销。数据平面采用对等模型进行跨物理主机的进程间通信,充分利用 CXL 共享内存的性能优势。
(3)为弥补 socket API 和共享内存之间的语义鸿沟,采取多种技术兼顾接口兼容性和性能优势。
基于 Yggdrasil 的 I/O 网络性能优势及良好的 API 接口兼容性,Yggdrasil 方案将在天翼云弹性计算产品线自主设计和研发的聚合计算平台进行落地,以减少网络 I/O 税,从而为客户提供更澎湃的算力资源,助力客户创造更多价值。
面向未来,天翼云将继续加强关键核心技术自主攻关,以领先的产品能力夯实数字基础设施底座,为千行百业数字化转型保驾护航。
评论