vivo Celeborn PB 级 Shuffle 优化处理实践

vivo互联网技术

12-11

vivo大数据平台通过引入RSS服务来满足混部集群中间结果（shuffle 数据）临时落盘需求,在综合对比后选择了Celeborn组件，并在后续不断优化完善。本文将分享vivo在Celeborn实际应用过程中对遇到问题的分析和解决方案，帮助读者对相似问题进行参考。