为什么要学音视频？

来源：来自 Twitter-X2Rtc

一直都在说“科技改变生活”，现实告诉我们这是真的。

随着通信技术和 5G 技术的不断发展和普及，不仅拉近了人与人之间的距离，还拉近了人与物，物与物之间的距离，万物互联也变得触手可及。

基于此背景下，音视频技术也成为了主流，与此同时，便催生出了大量的音视频需求，但目前具备音视频开发技术的开发者，可谓是少之又少。而且，现在音视频工程师的薪资比纯 Android 应用层开发高出 40%。

为什么要学习音视频

就业方向：目前百分之九十以上的互联网产品都需要用到音视频技术，尤其还有大量的传统企业在进行数字化转型，让音视频技术显得更为重要。如线上办公、线上教育、物联网金融、远程医疗、物联网等等众多行业都是以音视频技术为基础的。

薪资水平：在 BOOS 直聘公开统计中，音视频行业的工资 10k-20k 占 12%，20k-30k 占 45%，30k 占 35%，35k 以上占 13%。主要分布在 20k-35k 之间，想要取得一个不错的薪资，如果只是简简单单开发四大组件是不可能拿到这么高薪资的。音视频开发薪资这么高主要就是因为音视频技术人才非常稀缺，很少有人会完整的音视频开发。

技术壁垒：音视频开发相对门槛是较高的。首先你需要有 c/c++的语言基础，从学习基础上来看，就已经筛选掉了一大批。其次，大部分对于音视频相关技术的运用止于 ffmpeg,了解止于 RTMP/RTSP/HLS 等等，等等。对于 SRS，webrtc 更是很难找到系统学习的渠道和教程。

开发前景：首先市场需求大，无论是娱乐、教育、直播、社交媒体还是企业应用，都需要高质量的音视频技术和应用。而且技术还在不断更新，VR、AR 和 360°视频等技术给音视频开发带来了更多的机会。

什么是音视频技术

音视频技术其实就是音频技术和视频技术的一个统称，在技术处理上，其实音频和视频是要分开处理的。而且要注意一点，音视频从开始收集数据到最后展示都是离不开硬件设备的，也就是说，在做音视频开发时，就得做好和硬件打交道的准备。

音视频开发是指涉及音频和视频处理、编解码、传输、存储等方面的软件开发领域。它包括了实时音视频通信、流媒体服务、多媒体应用程序等内容。

在音视频开发中，常见的任务包括音频采集与录制、音频编解码、音频处理与增强（如降噪、消除回声等）、视频采集与录制、视频编解码、图像处理与分析等。此外，还需要关注实时传输和流媒体协议（如 RTP/RTCP, RTMP, HLS）的使用，以及存储和播放相关技术。

在这个领域中，开发者通常会使用各种语言和框架来实现不同功能，例如 C/C++、Java、Python 以及相关库和工具，如 FFmpeg, GStreamer, WebRTC 等。通过掌握相关技术和工具，可以开发出高质量的音视频应用程序或服务。

音视频开源项目盘点

01、 OpenH323 项目

上榜理由：最著名的 H.323 开源协议栈，视频会议开发必备协议栈，强烈推荐

最著名的 H.323 开源协议栈，包含了全部的 H.323 协议功能，并有大量视频会议实现的参考例子，如终端、MCU 服务器、gk 等 H.323 协议的核心组成部件，Openh323 是 H.323 协议首选协议栈，同时也是我们视频会议开发最值得作为参考的开源项目之一。

02、 ffmpeg 项目

上榜理由：最全面的开源编码器，包括了 H.264、MPEG4、G.72x 等音视频编码，效率也非常高，强烈推荐

目前最全面的开源编码器，其中包括常用的音视频编码协议 h.264、MPEG4、H.263、G.721、G.726、G.729 等，ffmpeg 虽然是基于 linux 的开源项目，但可以通过交叉编译的方式在 windows 下运行，其项目加入了很多优化效率的代码，如采用汇编替代 C，大大提高了编码的效率，推荐 ffmpeg 用于视频会议的实时编码。

03、webrtc 项目

上榜理由：Google 收购 GIPS 后开源的基于浏览器的实时通信开源项目，强烈推荐

Google 收购 GIPS 后开源的基于浏览器的实时通信开源项目，GIPS 是目前世界上最好的音频传输库，但其授权费非常高，webrtc 是 Google 收购 GIPS 后，公开的一个通信项目，其核心 voiceEngine 就是由 GIPS 建立的，因此视频会议的音频部分可以参考 webrtc 来实现。

04.X2RTC

扫码上方图中二维码，即可抢先体验X2Rtc

上榜理由：X2Rtc 是基于 WebRTC 技术堆栈，拓展 GB/T28181 协议以及其他通信协议，支持 RTSP、RTMP、WebRTC、H.323、SIP、HTTP-FLV、SRT 等。

X2Rtc 不仅拥有接入简单、多样部署、全链路质量透明、灵活产品组合、可定制、RTC+X 等六大功能；还可以灵活应用到视频会议、互动直播、应急安防、在线教育、远程医疗、物联网等六大场景。

05、OpenMeetings 项目

上榜理由：基于 java 的浏览器的视频会议开源项目，java 开发视频会议的首选

OpenMeetings 主要是基于 OpenLaszlo 的流媒体格式和 Red5 服务器的开源视频会议项目，其包含的功能包括音视频、电子白板等，其项目是用 java 进行开发。项目的缺点是 bug 较多，效率不高，但可以作为 flash 视频会议的一个参考。

参考来源

01.《音视频领域的知识怎么开始学习？》-知乎（玩转 Linux 内核）

02.《音视频流媒体开发学习：视频会议及流媒体十大开源项目》-哔哩哔哩（linux 技术栈）