藏在 VPU 里的玲珑棋局

最近 ChatGPT 引发了全球范围内的 AI 热，随之而来的是与 AI 算法紧密相关的 AI 计算与 AI 芯片又一次火爆了起来。但事实上，大语言模型能够驱动的算力增长是有限的。根据相关数据，未来有 70%-80%的 AI 计算任务将发生在机器视觉与多模态领域。因此，真正的 AI 时代，其实是视频计算的时代。

直播、短视频的持续热络，各种设备形态与行业场景对摄像、视频能力的需求，使专用的视频计算能力与处理单元将成为时代的刚需。

我们此刻正在，并且未来长期将生活在一个无处不是屏幕，无处不是视频的世界里。人们对高清、高帧率的视频需求，从来都是有增无减的，而经典计算结构中的 CPU+GPU 体系，已经无法满足海量视频业务的处理需求需求，于是视频处理芯片 VPU（Video Processing Unit）应运而生。

VPU 究竟能做什么？它的应用方向和市场格局处在怎样的阶段？让我们打开这枚小小的芯片，一起进入 VPU 的玲珑棋局。

观局：为什么需要 VPU？

这盘棋的开端，我们需要来了解 VPU 的出现的必然性是什么。

在目前阶段，无论是 C 端还是 B 端用户，对高清视频（4K/8K）都有着愈发清晰强烈的需求。作为普通用户，我们期待着直播、短视频、VR 的高清体验持续升级，而企业则需要提升在线会议、工业视觉、自动驾驶等领域的高清视频能力。整体而言，我们处在冲向 4K 泛在化、8K 落地应用的关键节点上。

但向高清视频的冲刺，却会带来视频编解码方面更高的算力消耗与网络成本。尤其对于算力而言，当海量视频编解码需求出现时，传统的 CPU 计算方式缺乏针对性，处理效率低，并且会带来能耗与部署空间的浪费，综合成本过高。GPU 处理视频编解码的能力更好，但其资源利用率和浮在灵活性依旧不足。尤其使用 GPU 来处理编解码任务，往往会陷入驱动程序与处理器不兼容的问题，从而导致大量任务无法正常运行。

专业的芯片做专业的事，是这个时代半导体产业发展的核心命题。视频任务既然让 CPU 或 GPU 都有点难以处理，那么 VPU 这种编解码更加灵活，处理能力更加具有专业性的芯片也就应运而生。

VPU 瞄准的，实际上是一个非常大的机会。

落子：VPU 的应用与考验

就目前情况来看，VPU 的应用领域与关联场景非常丰富。这是因为视频正成为无处不在，充斥在生活各个角落与产业各个领域的基础信息样态。在云端，短视频和直播平台每天要处理海量的视频编解码任务，而在端侧，摄像头、无人机、手机、PC 等各种设备都具备拍摄视频和播放视频的功能。

这也让 VPU 的落子主要呈现在两个领域。一方面是在云端成为数据中心的一部分，以应对海量视频数据的加速需求；另一方面是在终端侧，与手机、汽车、安防、无人机、AR\VR 设备结合，提高设备的视频编解码性能，降低视频处理所需的功耗与时延。在视频处理需求爆发式增长的今天，产业各界对 VPU 也提出了一系列新的需求，我们可以将其总结为三个能力：

1.高清编解码能力：VPU 需要应对 4K 甚至 8K 的编解码，满足泛在化高清的落地需求。如今，在线会议、工业质检、安防等应用也在升级 4K，无处不在的泛化 4K，已经成为各界对视频处理能力普遍而广泛的需求。

2.软件环境兼容能力：VPU 要能够灵活适配不同的操作系统与软件环境，从而保障视频应用的软硬兼容性，避免因软件问题导致资源措置与兼容难题。

3.硬件场景适配能力：VPU 需要灵活适配不同的硬件特性，从而降低端到端时延，提高编解码处理效率，以此来应对不同硬件体系对 VPU 的需求。

在两大领域、三大能力的框定下，VPU 的棋局已经愈发清晰。这盘棋，也确实吸引到了各界棋手的加入。

争势：一场千亿规模的棋局

目前阶段，VPU 的产业实践与市场发展处在高速爆发期，各个领域的互联网公司、科技企业都加入了这项关键技术的布局。其中比较有代表性的，是 2021 年 4 月，谷歌发布了自研的 Argos VCU。在那之后，在流媒体、短视频、直播领域具有优势的企业，纷纷开始布局 VPU。

比如说，腾讯自研的视频转码芯片“沧海”，已于 2022 年 3 月成功流片。Meta、字节跳动、快手等互联网大厂纷纷启动了 VPU 布局。尤其值得注意的是，过往半导体投入并不多，但高度依赖视频业务的字节跳动与快手都布局了 VPU，足可见业界对 VPU 技术的重视。有数据认为，VPU 将在未来成长为千亿人民币规模的市场，目前来看极有可能。

但互联网、流媒体厂商布局 VPU，还属于跨界提前布局，其效果还需要几年时间显现出来。而业界在目前阶段，则更需要成熟、稳定的 VPU 产品进行支撑。

比如说，此前安谋科技发布了第二代 VPU 产品“玲珑”系列 V6/V8。这两款产品对应市场主流的 4k\8k 实时解码需求而生。具有配置灵活可定制、编解码性能优异、面积小等特点。在硬件场景的适配上，玲珑 V6/V8 既可以面向数据中心场景，也能够与摄像头、汽车、智能家居、移动设备结合；在软件兼容问题中，其已经完整实现了 Android 和 Linux 驱动，以及上层一些应用框架支持，可以满足各种消费类产品、云端以及嵌入式场景的需求。

总体来看，VPU 市场应用处在巨头进驻、高速爆发、产业应用性广泛的阶段，这些特征基本预示了 VPU 赛道未来的潜力价值。

未来，高清视频与机器视觉将无处不在，VPU 的身影或许也将如此。