写点什么

Gluten 首次开源技术沙龙成功举办,更多新能力值得期待

作者:Kyligence
  • 2023-02-22
    上海
  • 本文字数:1179 字

    阅读完需:约 4 分钟

Gluten 首次开源技术沙龙成功举办,更多新能力值得期待

2023 年 2 月 17 日,由 Kyligence 主办的 Gluten 首次开源技术沙龙在上海成功举办,本期沙龙特邀来自 Intel、BIGO、eBay、阿里、华为和 Kyligence 等行业技术专家齐聚一堂,共同探讨了向量化执行引擎框架 Gluten 现阶段社区的重点开发成果和未来的发展方向。

 

Gluten 首次开源技术沙龙参与成员合照

 

Gluten 项目简介

 

Gluten 是由 Intel 和 Kyligence 两家企业自 2021 年合作共建的全新开源项目,Gluten 项目旨在为 Apache Spark 注入 Native Vectorized Execution 的能力,极大优化 Spark 的执行效率和成本。目前,Gluten 社区已经吸引了多家企业和技术爱好者参与共建。

 

Gluten 在拉丁文中有“胶水”的含义,Gluten 项目的作用也正像胶水一样,主要用于“粘合” Apache Spark 和作为 Backend 的 Native Vectorized Engine,目前在 Gluten 项目中已经明确开始支持的 Backend 有 Velox、Clickhouse 和 Apache Arrow。

 


项目详情:https://github.com/oap-project/gluten

 

技术沙龙活动现场

 

活动当天,来自 Intel、Kyligence 和 BIGO 的工程师代表分别分享了目前各自研发的重点工作,并就 Gluten 项目未来的重点发展方向进行了深入讨论。目前 Gluten 社区已经完成 Velox Backend 和 Clickhouse Backend 在 TPC-H 数据集上的验证工作,不同 Backend 在 TPC-H 1000 数据集下的性能表现都收获了显著的性能提升。

 



2023 年,Gluten 社区将围绕以下方面开展项目工作:

 

  • 完成 TPC-DS 数据集上的验证和性能测试工作

  • 尝试其他硬件加速的工作

  • 完善 CICD 流程和测试覆盖

  • 完善数据源对接、数据源格式的支持工作

  • 优化器:聚合下推以及 TPC-DS q67 的优化

  • 完善数据类型和函数的支持工作

  • 尝试 Remote Shuffle Service 的对接工作

 

希望越来越多的同学关注 Gluten 社区的进展,并使用和贡献到这个项目,我们的项目地址是:https://github.com/oap-project/gluten,如果你喜欢这个项目,别忘了在 Github 上给我们点个 🌟 哦!

 

加入 Gluten 用户群,请添加 K 小助并备注“Gluten”

 


关于 Kyligence

跬智信息(Kyligence)由 Apache Kylin 创始团队于 2016 年创办,是领先的大数据分析和指标平台供应商,提供企业级 OLAP(多维分析)平台产品 Kyligence Enterprise 和一站式指标平台 Kyligence Zen,为用户提供企业级的经营分析能力、决策支持系统及各种基于数据驱动的行业解决方案。

 

Kyligence 已服务中国、美国、欧洲及亚太的多个银行、证券、保险、制造、零售、医疗等行业客户,包括建设银行、招商银行、平安银行、浦发银行、北京银行、宁波银行、太平洋保险、中国银联、上汽、长安汽车、百胜中国、星巴克、安踏、李宁、阿斯利康、UBS、MetLife 等全球知名企业,并和微软、亚马逊云科技、华为、安永、德勤等达成全球合作伙伴关系。Kyligence 获得来自红点、宽带资本、顺为资本、斯道资本、Coatue、浦银国际、中金资本、歌斐资产、国方资本等机构多次投资。

发布于: 刚刚阅读数: 7
用户头像

Kyligence

关注

To be Great! 2021-11-08 加入

Kyligence 由 Apache Kylin 创始团队创建,致力于打造下一代智能数据云平台,为企业实现自动化的数据服务和管理。

评论

发布
暂无评论
Gluten 首次开源技术沙龙成功举办,更多新能力值得期待_开源技术_Kyligence_InfoQ写作社区