【重磅】华为云盘古大模型 5.0,正式发布!
![【重磅】华为云盘古大模型5.0,正式发布!](https://static001.geekbang.org/infoq/75/75240ffddbdad8a60d9c8252b89c1f62.webp)
2024 年 6 月 21 日,在华为开发者大会 2024(HDC 2024)上,华为常务董事、华为云 CEO 张平安正式发布盘古大模型 5.0,在全系列、多模态、强思维三个方面全新升级;张平安还分享了盘古大模型在自动驾驶、工业设计、建筑设计、具身智能、媒体生产和应用、高铁、钢铁、气象等领域的丰富创新应用和落地实践,持续深入行业解难题。
此外,华为诺亚方舟实验室主任姚骏、华为云 CTO 张宇昕分别就盘古大模型 5.0 技术解密和华为云全栈系统性创新发表主题演讲,详细解读华为云在 AI 领域的全栈创新优势。
![](https://static001.geekbang.org/infoq/7b/7b872257983cee5e3959d1bb5c6069d1.webp?x-oss-process=image%2Fresize%2Cp_80%2Fformat%2Cpng)
▲华为常务董事、华为云 CEO 张平安发布盘古大模型 5.0
![](https://static001.geekbang.org/infoq/15/154939319497f7dbab21e1650833b034.webp?x-oss-process=image%2Fresize%2Cp_80%2Fformat%2Cpng)
盘古大模型 5.0,在全系列、多模态、强思维三个方面做了全新升级
全系列:盘古大模型 5.0 包含不同参数规格的模型,以适配不同的业务场景。十亿级参数的 Pangu E 系列可支撑手机、PC 等端侧的智能应用;百亿级参数的 Pangu P 系列,适用于低时延、高效率的推理场景;千亿级参数的 Pangu U 系列适用于处理复杂任务;万亿级参数的 Pangu S 系列超级大模型能够帮助企业处理更为复杂的跨领域多任务。
多模态:盘古大模型 5.0 能够更好更精准地理解物理世界,包括文本、图片、视频、雷达、红外、遥感等更多模态。在图片和视频识别方面,可支持 10K 超高分辨率;在内容生成方面,采用业界首创的 STCG(Spatio Temporal Controllable Generation,可控时空生成)技术,聚焦自动驾驶、工业制造、建筑等多个行业场景,可生成更加符合物理规律的多模态内容。
![](https://static001.geekbang.org/infoq/fc/fc70e4c36810629b9a8bd2f2dab3d063.jpeg?x-oss-process=image%2Fresize%2Cp_80%2Fauto-orient%2C1)
▲升级后多模态理解能力得到了大幅提升,看得更细致,理解更聪明
![](https://static001.geekbang.org/infoq/fa/fae269c70c37369c67d18f44058da88d.jpeg?x-oss-process=image%2Fresize%2Cp_80%2Fauto-orient%2C1)
▲《清明上河图》海量信息中,大海捞针的挑战也能轻松应对
强思维:复杂逻辑推理是大模型成为行业助手的关键。盘古大模型 5.0 将思维链技术与策略搜索深度结合,极大地提升了数学能力、复杂任务规划能力以及工具调用能力。
![](https://static001.geekbang.org/infoq/35/350022135dde7e9d182e199c4d77e756.webp?x-oss-process=image%2Fresize%2Cp_80%2Fformat%2Cpng)
![](https://static001.geekbang.org/infoq/3c/3c628b91f0566976fff008f12757a458.webp?x-oss-process=image%2Fresize%2Cp_80%2Fformat%2Cpng)
过去一年中,盘古大模型持续深耕行业已在 30 多个行业、400 多个场景中落地
重塑自动驾驶
盘古大模型 5.0 通过创新的可控时空生成技术,结合场景视频生成、4D BEV 视频生成、自动驾驶仿真库及路网信息,能更好地理解物理规律,大规模生成和实际场景相一致的驾驶视频数据,还可以灵活增加控制条件,生成不同路况、不同光照、不同天气的训练视频数据,加速自动驾驶技术的快速成熟。
![](https://static001.geekbang.org/infoq/54/544a59929d337a0e3f9ce3143fc4f0ab.jpeg?x-oss-process=image%2Fresize%2Cp_80%2Fauto-orient%2C1)
▲生成车身四周,六个摄像头视角的视频,可直接用于自动驾驶训练
![](https://static001.geekbang.org/infoq/6b/6bd45eda596d37ba4c84f0de28ad8d3b.jpeg?x-oss-process=image%2Fresize%2Cp_80%2Fauto-orient%2C1)
▲生成晴天,雨天,黑夜的行车视频,让自动驾驶学会应对丰富多样的场景变化
重塑工业设计
以新车造型设计为例,周期一般需要 1-2 年,盘古大模型可以让汽车的造型设计时间大幅缩短。造型设计师可以将自己的灵感,通过对话、画图与大模型交互,生成 3D 汽车数字模型,并可进行风格化调整、零部件编辑、颜色更换等。盘古大模型生成的数字模型还可直接输出成 3D 文件,支持 10 几种主流格式,设计师可以直接 3D 打印成样品,减少制作油泥模型的轮次,极大地节省成本和时间。
除了汽车造型设计,盘古大模型还可以用于汽车的工装设计、模具设计,以及电子产品领域的工业设计等。
重塑建筑设计
基于盘古大模型的可控生成能力,只需输入设计的黑白草图,即可生成彩色并带有纹理的建筑群 360°实景视频;基于盘古 3D 重建能力,还可以构建出高真实感的建筑 3D 模型,将复杂建筑群的概念设计周期从数周缩短到数十分钟,助力建筑师创造出更加出色的建筑作品。
![](https://static001.geekbang.org/infoq/01/0126a674a2d5ed326fe7ad3a8d095ce6.jpeg?x-oss-process=image%2Fresize%2Cp_80%2Fauto-orient%2C1)
重塑具身智能
盘古大模型能够让机器人完成 10 步以上的复杂任务规划,并且在任务执行中实现多场景泛化和多任务处理。同时盘古大模型还能生成机器人需要的训练视频,让机器人更快地学习各种复杂场景。
![](https://static001.geekbang.org/infoq/4c/4c4dbf881751a4e0b854aa9047864909.webp?x-oss-process=image%2Fresize%2Cp_80%2Fformat%2Cpng)
重塑媒体内容生产和应用领域
盘古大模型能够将实拍视频快速转换成特定风格的动漫,并保持角色样貌特征前后一致,舞蹈、武打等大运动轨迹也能确保合理一致的视觉效果;能自动将视频译制成不同语言,并保留原始角色的音色、情感、语气;将译制配音、动漫生成等场景的制作周期从月级缩短到天级,大大提升制作效率,作品一次拍摄多元化制作,实现价值最大化。
![](https://static001.geekbang.org/infoq/e7/e7e6b45d592e9cd78624649dcb49e05e.jpeg?x-oss-process=image%2Fresize%2Cp_80%2Fauto-orient%2C1)
还能通过 AI 翻译和拟人化语音合成能力,实现 AI 同声传译,让云会议、视频通话等可以实现母语交流体验。
重塑高铁
全国每天需要检测的动车大概有 3.2 万节车厢,过去需要大量的巡检工人在凌晨时段去完成,耗时耗力。如今结合盘古大模型和巡检机器人,可精准识别一列动车的 3.2 万个项点,覆盖 8 大类、350 多种复杂故障,帮助高铁提升运营效率,降低成本,减少人工在凌晨时段去巡检的艰辛作业。
重塑钢铁
以上海宝武钢铁热轧生产线为例,每次调整生产钢板的种类和尺寸,都需要工程师重新调整 7 道精轧机组的 300 多个参数,需要耗费约 5 天的时间。盘古大模型能够对最优参数进行预测,显著降低热轧生产线调优时间,并提高预测精度和钢板成材率。目前盘古大模型目前已在宝钢 1880 热轧生产线上线,预测精度提高 5%以上,钢板成材率提升 0.5%,预计每年可以多产钢板 2 万余吨,年收益达 9000 余万元。此外,盘古大模型还将应用于高炉场景,对炉温、铁水温度、硅含量等炉况进行仿真,从而辅助高炉精准控制,充分利用每一分能源,降低能源成本。
重塑气象
华为云联合深圳市气象局,在分辨率为 25 公里的全球模型基础上,融合区域高质量气象数据集,升级了分辨率分别为 1 公里、3 公里、5 公里的区域预报能力,包含气温、降雨、风速等气象要素。不仅如此,今年华为云还联合天融环境打造了环境大模型,将污染六项的预测准确度全面提升 10%以上。
重塑医药
天士力基于盘古大模型打造“数智本草大模型”。一方面基于盘古的 L0 基础模型,学习训练了 4000 多万篇文献,尤其是学习了 1000 多本古籍,从古方古籍和现代文献中总结出知识和经验,可以赋能方剂筛选和优化、提升研发效率,也能辅助医生问诊。另一方面,天士力在盘古 17 亿化合物的药物分子大模型基础上,增训了 350 万天然产物分子数据,未来有望更好地优化方剂和发现新药。
![](https://static001.geekbang.org/infoq/bf/bf2aabeb71f06c8e529dfed9c0ea2a13.webp?x-oss-process=image%2Fresize%2Cp_80%2Fformat%2Cpng)
![](https://static001.geekbang.org/infoq/5a/5aaf421233a1cedc4bfa8bb1267518e8.webp?x-oss-process=image%2Fresize%2Cp_80%2Fformat%2Cpng)
华为云对昇腾 AI 云服务进行持续优化。业界万亿参数模型训练的平均无中断时长约 2.8 天,昇腾 AI 云服务可实现 40 天无中断;业界平均集群故障恢复时间约 60 分钟,昇腾 AI 云服务可以缩短到 10 分钟,同时能将大模型的资源开通时间从月级缩短到天级,加速大模型的开发。
目前昇腾 AI 云服务已全面适配行业主流的 100 多个大模型,以云服务的方式协助客户开发,训练,托管和应用模型,打造百模千态的“黑土地”。
![](https://static001.geekbang.org/infoq/58/5809a68e1017547c393de2fa3c632410.webp?x-oss-process=image%2Fresize%2Cp_80%2Fformat%2Cpng)
![](https://static001.geekbang.org/infoq/f4/f48254c1dd0409df8334034681b2da59.webp?x-oss-process=image%2Fresize%2Cp_80%2Fformat%2Cpng)
![](https://static001.geekbang.org/infoq/48/486a570e44c06eb91915f22ec24a74bc.webp?x-oss-process=image%2Fresize%2Cp_80%2Fformat%2Cpng)
![](https://static001.geekbang.org/infoq/52/52193a90fa4e73ee744df7147ce68413.webp?x-oss-process=image%2Fresize%2Cp_80%2Fformat%2Cpng)
![](https://static001.geekbang.org/infoq/56/56a4374dced278ca29a8e1a997c7f466.webp?x-oss-process=image%2Fresize%2Cp_80%2Fformat%2Cpng)
![](https://static001.geekbang.org/infoq/15/159487d1ce11a768c0f7783b044c3870.webp?x-oss-process=image%2Fresize%2Cp_80%2Fformat%2Cpng)
![](https://static001.geekbang.org/infoq/1d/1d156d69087b78f0d3443f535c10c924.webp?x-oss-process=image%2Fresize%2Cp_80%2Fformat%2Cpng)
![](https://static001.geekbang.org/infoq/5f/5f314551bec713e678e1959e1422331a.webp?x-oss-process=image%2Fresize%2Cp_80%2Fformat%2Cpng)
大模型训练推理用华为云昇腾 AI 云服务,澎湃算力,即开即用
![](https://static001.geekbang.org/infoq/77/7738e1667a6cd6951eb29c87d9e3c51b.webp?x-oss-process=image%2Fresize%2Cp_80%2Fformat%2Cpng)
华为云 CTO 张宇昕表示,通过全栈系统性创新,能够让大模型的数据准备、训练、推理、应用实现全流程的高效率和高性能。华为云的全栈系统性创新覆盖了数据中心、云平台架构和基础设施服务,为 AI 开发提供 AI Native 的基础设施。
![](https://static001.geekbang.org/infoq/c6/c6b26da76fc4f4e808309463b2e689f5.webp?x-oss-process=image%2Fresize%2Cp_80%2Fformat%2Cpng)
当前云平台在大模型的训练和使用中通常存在“算力墙”“内存墙”“能效墙”等问题。为此,华为云打造了下一代的云基础设施 CloudMatrix,改变传统数据中心的架构和算力供给模式,将传统的以 CPU 为中心的主从架构,演进为多元算力对等全互联架构;并通过高速互联网络协议,将 CPU、NPU、GPU 等算力资源全部互联和池化,从而把 AI 算力从单体算力演进到矩阵算力,开启智能算力新纪元。
同时,针对云平台在大模型的训练和使用中存在的“内存墙”问题,华为云正式发布 EMS 弹性内存存储服务,基于 Memory Pooling 专利技术,通过显存扩展、算力卸载、以存代算等三大手段来打破内存墙,释放极致算力。
基于新一代云基础设施和 EMS 弹性内存存储服务、昇腾 AI 云服务等创新,华为云已经在贵安、乌兰察布和芜湖,构建了三大 AI 算力中心 CloudOcean;同时也在华北、华东、华南等热点区域部署了 AI 算力资源池 CloudSea;还通过华为云 CloudLake 和 CloudPond 边缘云平台,将 AI 算力推到客户身边,提供最低时延的 AI 训推服务。由此,华为云打造了云、网、边、端协同的 AI Native 的算力平台,提供给开发者、客户和伙伴使用。
盘古大模型也是基于华为云的 AI 平台开发。会上,华为诺亚方舟实验室主任姚骏从数据高效、参数高效和算力高效三个方面介绍了盘古大模型 5.0 的训练过程。
![](https://static001.geekbang.org/infoq/07/072234abf0b927a8534c592095823f49.webp?x-oss-process=image%2Fresize%2Cp_80%2Fformat%2Cpng)
▲华为诺亚方舟实验室主任姚骏,介绍盘古大模型 5.0 关键创新
同时,华为云对 AI 开发生产线 ModelArts 进行升级,在 AI 开发基础设施和流水线之上,构建了大模型即服务平台 ModelArts Studio,提供百模千态的第三方大模型托管服务,支持对大模型定制开发,并提供相应的工具和行业集成套件,让客户可以方便地将大模型与业务系统结合。
除了系统性创新,华为云还将盘古大模型和华为在产品研发、数据治理、安全防护、业务运维等各个领域积累的数据和经验相结合,“跳了自己的降落伞”,应用在了华为云 CodeArts、DataArts、MetaStudio 和 GaussDB、云安全等系列云服务的智能化上。将华为云的服务重塑和升级,从而更智能、更高效。
软件开发:华为云通过结合 AI Agent 能力,将 CodeArts 软件开发生产线从单点智能升级到项目级智能,大幅提升了问题定位率和项目级问题修复成功率,让开发者能轻松实现项目级智能。
数据治理:华为云将盘古大模型和华为多年数据治理经验相结合,让不熟悉 IT 技术的业务人员、管理人员可以通过自然语言交互的方式,快速获取需要的数据,形成可视化的图表,直接高效地管数、用数。
数字内容生产:华为云将盘古媒体大模型和华为有着深厚积累的音视频编解码、3D 模型物理仿真、图形渲染等引擎能力相结合,一起用于 AI 内容生成。这样生成的数字内容更符合物理世界的规律,并且可以实现任意时长的实时互动,突破了当前 AIGC 的局限。
数据库:华为云将产品文档、专家知识、运维经验等数据库专业数据和大模型相结合,构建盘古数据库大模型,让 GaussDB 数据库在开发、测试、迁移、运维等全生命周期实现智能化,显著提升开发人员和 DBA 的使用效率。
安全:华为云打造了面向安全领域的盘古安全大模型,能够快速、精准地给出安全治理咨询的专业意见,让企业安全更加智能。
![](https://static001.geekbang.org/infoq/da/da570abd7e2b33ad3efa3150c5d3357c.webp?x-oss-process=image%2Fresize%2Cp_80%2Fformat%2Cpng)
华为云是华为公司面向开发者的统一底座,目标打造昇腾、鸿蒙、鲲鹏、GaussDB、欧拉等各项根技术的生态,给广大开发者一个更优的选择。
专属开发空间:为了让开发者更好地学习和使用这些技术,华为云为每个新生态的开发者免费提供一台云主机、一套开发工具和 5GB 的云存储空间。
专利和科技交流社区:华为在 Chaspark 网站上提供了开放的专利搜索工具-查思专利,开发者可以免费查询到全球近 1.9 亿件专利数据,与华为共同进步与成长。
开发者布道师计划:未来 3 年计划发展超过 3000 名华为开发者布道师。
技术创新要和行业场景需紧密结合才能真正实现深耕行业,华为云派出 500+技术专家深入行业,了解客户需求,解决行业难题。
![](https://static001.geekbang.org/infoq/5e/5eaef2c903a6c3b2cd794ddbd337bf28.webp?x-oss-process=image%2Fresize%2Cp_80%2Fformat%2Cpng)
![](https://static001.geekbang.org/infoq/dd/dd0e59449fb517c7adf34e407f81feda.webp?x-oss-process=image%2Fresize%2Cp_80%2Fformat%2Cpng)
![](https://static001.geekbang.org/infoq/f9/f9c1e145577e8d2a00ccbdf9aa201109.webp?x-oss-process=image%2Fresize%2Cp_80%2Fformat%2Cpng)
![](https://static001.geekbang.org/infoq/8c/8cdaaea64e1d3ea92576ad5c8121d28b.webp?x-oss-process=image%2Fresize%2Cp_80%2Fformat%2Cpng)
![](https://static001.geekbang.org/infoq/ac/ac43114ac34cdd2f1b8f74dd0fb7118f.webp?x-oss-process=image%2Fresize%2Cp_80%2Fformat%2Cpng)
![](https://static001.geekbang.org/infoq/a4/a4523761db763b3e77e8b30866c43df5.webp?x-oss-process=image%2Fresize%2Cp_80%2Fformat%2Cpng)
![](https://static001.geekbang.org/infoq/80/80ddea4a01202ab30baf169323264e42.webp?x-oss-process=image%2Fresize%2Cp_80%2Fformat%2Cpng)
张平安强调,一直以来,华为云盘古大模型都坚定地聚焦行业,在解难题、做难事的道路上不断攻坚克难,砥砺前行,重塑千行万业。华为云将与所有的客户、伙伴和开发者一起,创新不止,攀登不止,让云无处不在,让智能无所不及,加速千行万业的智能升级。
版权声明: 本文为 InfoQ 作者【华为云开发者联盟】的原创文章。
原文链接:【http://xie.infoq.cn/article/b3844b435ec55be47b0847511】。文章转载请联系作者。
评论