陈迪豪:推荐系统大规模特征工程与 Spark 基于 LLVM 优化
推荐系统学院(Recommended Systems Institute)是第四范式专门为推荐系统爱好者提供的分享推荐系统研究及其应用的系列课程。
Spark作为目前最流行的大数据处理框架,在机器学习场景以及推荐系统中应用非常广泛。第四范式基于LLVM优化了Spark离线计算引擎,支持刚发布的Spark 3,在功能和性能上彻底解决Spark应用不能上线以及效率问题。
本期主题
本次将主要分享第四范式如何基于LLVM优化了Spark离线计算引擎。
你可以:
-了解推荐系统大规模特征工程的实现方案
-了解基于LLVM对Spark执行计划对优化
实用知识点:
-Spark / LLVM
主讲人介绍
陈迪豪
第四范式先知平台架构师,负责深度学习框架产品化以及下一代特征引擎开发工作。积极参与了开源社区TensorFlow、Kubernetes、TVM等项目开发,对分布式系统和深度学习平台有一定了解,目前专注于离线在线一致性的特征引擎开发。
课程最适合这样的你
推荐系统学院是为对推荐系统技术感兴趣的同学开设的,满足如下条件的同学最适合来学习:
如果你想要提高能力,升职加薪
想要提升自己的专业技术能力,必须从培养解决核心问题能力开始,我们不整虚的,都是干货,一个小时下来必须让你有所收获。
如果你想要实现自我价值和自我提升
“码出未来”不是一句空话,人工智能技术发展已经在各行各业生根发芽,以肉眼可见的速度改变人类的未来。如果你希望在推荐系统领域学习钻研,完成自我价值的实现,那么认真学习我们的课程,相信一定能加速这一天的到来。
如果你想要结交人脉,提高技术探讨深度
多与优秀的人交流,自己也会变得越来越优秀。有许多在该行业志同道合的伙伴潜伏在各大互联网公司,而你居然都不认识?来和他们一起来学习吧,结交志同道合的好友和技术专家,建立属于自己的高质量学术圈。
需要提醒的是,本期主题的专业技术性较强,更适合有一定基础的算法工程师和机器学习资深爱好者哦。如果你想要了解这个行业,也欢迎准时来直播间切磋交流。
评论