技术分享| 视频传输 Simulcast 与 Svc
1.什么是 Simulcast
Simulcast 直译过来是多播的意思,其实就是一个客户端发送多条不同码率大小的流,为了达到这样的效果,客户端会对同一帧画面进行不同分辨率的编码来达到降低码率的目的。
视频发送端同时向服务端 SFU 发送多个不同分辨率的视频流(1080p、720p 或 360p)。SFU 接收到这三个码流后,根据终端性能选择其中一个码流转发给终端。
例如 PC2 网络良好时,SFU 向终端发送 1080p 视频流。网络不好时,可以发送 720p 的视频流。Simulcast 模式对于移动终端类型非常有用。可以灵活智能地适应不同的网络环境。
但是 Simulcast 也有一定的缺陷,虽然 Simulcast 可以解决下行带宽不足时降码率的需求,但是在应用的过程中存在比较致命的缺陷:
A.上行带宽的增加,我们在上行时会多发送多条流,导致大量的带宽浪费。而为了应对几个下行网络较差的用户而牺牲上行用户的带宽资源,这样的做法有待商榷;
B.下行可供的流选择性很少,及时使用 3 条流同时传输的方式,在移动网络这样复杂多变的网络条件下,上下调整的幅度将会是巨大的,会造成不好的用户体验,相比 SVC 适用性较差。
2.什么是 SVC
可伸缩视频编码 SVC(Scalable Video Coding)是一种可扩展的视频编码模式,是 H.264 标准的一个扩展,最初由 JVT 在 2004 年开始制定。H.264 SVC 是 H.264 标准的扩展部分,SVC 扩展部分引入了一种传统 H.264 AVC 不存在的概念——编码流中的层。基本层编码最低层的时域、空域和质量流;增强层以基本层作为起始点,对附加信息进行,从而在解码过程中重构更高层的质量、分辨率和时域层。通过解码基本层和相邻增强层,解码器能生成特定层的视频流。与 Simulcast 模式下同时传输多个流不同,SVC 模式侧重于视频编码。
SVC 在视频编码过程中将视频分为多个层(核心层、中间层和扩展层)。上层依赖于下层。上层越高,视频越清晰,视频越低,视频越模糊。
在带宽较差的情况下,只能传输底层(核心层)。如果带宽足够,则可以将所有数据传输到终端。
SVC 优势:
时域可分级:(Temporal scalability):可以从码流中提出具有不同帧频的码流。
空间可分级:(Spatial scalability):可以从码流中提出具有不同图像尺寸的码流。
3.在 anyRTC 云平台中如何应用
anyRTC 云平台中原生支持 Simulcast,通过可拓展编码方式可实现 SVC 的编码传输;用户可以根据自己的需求进行选择。同时 anyRTC 云平台提供的是传输服务,用户只需要关心端到端的情况。anyRTC 云平台提供的传输网络包括:
A.分区域/分运营商部署 RTC 服务器,用户通过接入服务实现就近接入,保障了最后一公里的质量。
B.灵活/按需部署路由节点,通过路由分配服务,能够根据实时网络质量选择最优的传输路径。
C.分布式的 RTC 节点更有利于通讯方数的扩展和服务扩容;同时支持公/私混合云的部署方式。
D.需要保障数据传输质量,可以尝试 RAST 协议库。
4.概括
版权声明: 本文为 InfoQ 作者【anyRTC开发者】的原创文章。
原文链接:【http://xie.infoq.cn/article/ade1a5623e3ae71bf7d8adf94】。文章转载请联系作者。
评论