2022全网最详细的音视频开发学习路线，零基础到项目实战，从小白到音视频专家

前言

音视频的历史与前景在这里就不介绍了，小编之前的文章里面都有讲到。

行业现状分析

核心竞争力：定义音视频是程序届的皇冠，掌握音视频意味着拿到通往未来的船票，不用担心会被其他人替代。音视频是有门槛的。是与其他人拉开差距的分水岭
高端人才相关缺乏：Boss直聘中，北上广深很多年限上50w-70w的音视频岗位，常年还招不到人，月薪2-3万大多是刚从事音视频入门级开发者
技术迭代慢：就H264编码从95年成为标准至今，都在使用。比较偏底层技术，底层技术几十年不会有太大的改变

招聘的公司

招聘的公司行业分布广泛（以下列举大部分是互联网公司）

互联网

掌门科技哔哩哔哩字节跳动腾讯欢聚时代快手阿里巴巴虎牙

即构科技网易小米商汤科技融云蚂蚁金服爱奇艺 ...等等

计算机软件

华为海康威视浙江大华 ...等等

移动互联网

常相伴(互动娱乐) 声网 ...等等

电子商务

京东拼多多美团 ...等等

人力资源服务

Boss直聘

音视频开发岗位

说道薪资待遇什么的，想必是你们比较关心的一件事。我就随便在Boss直聘搜索的音视频开发岗位的薪资。

从上图可以看出音视频开发岗位的薪资平均都是在20K以上，但是他们对学历还是有一定的要求的最低基本都是本科学历。

为什么音视频的开发薪资这么高呢？

因为是音视频岗位人才稀缺，很少有人会完整的音视频开发。

那么我们该如何学习音视频？需要学习那些内容？【文末彩蛋】附上音视频开发知识点学习资料以及思维导图

大家可以参考我的学习路线知识点进行学习

音视频开发总体学习知识点：

1.首先需要学习的是音视频基础知识

有些朋友对音视频学习有些误区，以为需要很多的理论基础才开始去实践，实际上大家只需要懂：

视频：

YUV格式
RGB格式
帧率
分辨率
H264 I P B帧原理

音频：

PCM
采样率
采样格式
码率

等这些基础知识掌握了之后即可开启音视频学习的大门。

1、音视频基础开发知识：

音视频基础知识	o 音频基础知识，PCM格式、编码原理等
	o 视频基础知识，YUV格式、IPB帧原理等

Ffmpeg环境搭建	o Windows平台
	o Linux平台
	o MAC平台

常用工具	o MediaInfo
	o VLC播放器 o EasyICE

2、FFmpeg命令实战

命令帮助	o 如何查询Ffmpeg命令帮助
	o Ffmpeg命令分类

ffplay命令	o ffplay播放控制
	o ffplay播放pcm
	o ffplay播放yuv
	o ffplay使用filter播放

ffmpeg命令	o pcm提取
	o yuv提取
	o aac提取
	o h264提取
	o 视频录制命令
	o 多媒体文件的分解/复用命令
	o 裁剪与合并命令
	o 图片/视频互转命令
	o 直播相关命令
	o 各种滤镜命令

3、FFmpeg编程实战

音视频渲染实战	o SDL环境搭建
	o SDL事件处理
	o SDL线程处理
	o YUV视频播放实战
	o PCM声音播放实战

FFmpeg API精讲	o FFmpeg框架分析
	o FFmpeg内存模型分析
	o FFmpeg常用结构体精讲

音视频编解码	o FFmpeg解码流程分析
	o FFmpeg编码流程分析
	o AAC编解码原理
	o H264编解码原理
	o AAC解码实战
	o AAC编码实战
	o H264解码实战
	o H264编码实战
	o MP3转AAC实战

音视频封装格式	o FLV封装格式分析
	o MP4封装格式分析
	o 多媒体解复用实战
	o 多媒体复用实战
	o 多媒体转封装格式实战
	o 音频重采样
	o 视频尺寸变换

音视频过滤器	o 音视频过滤器
	o 视频过滤器
	o 过滤器实际项目实现

ffplay播放器	o 掌握ffplay.c的意义
	o ffplay框架分析
	o 音视频解码
	o 音视频控制
	o 音视频同步
	o 参数机制

播放器开发实战	o 播放器框架分析
	o 模块划分
	o 音视频解码
	o 播放器控制
	o 音视频同步

ffmpeg录制转码	o 掌握ffmpeg.c的意义
	o ffmpeg框架分析
	o 音视频编码
	o 封装格式转换
	o 提取音频
	o 提取视频
	o logo叠加
	o 音视频文件拼接
	o filter机制

4、流媒体客户端实战

RTMP流媒体	o RTMP协议分析
	o wireshark抓包分析
	o H264 RTMP封装
	o AAC RTMP封装
	o RTMP拉流实战
	o H264 RTMP解析
	o AAC RTMP解析
	o RTMP推流实战

HLS流媒体	o HLS协议分析
	o HTTP协议分析
	o TS格式分析
	o wireshark抓包分析
	o HLS拉流实战
	o FFmpeg HLS源码分析
	o HLS多码率机制

HTTP-FLV流媒体	o HTTP-FLV协议分析
	o wireshark抓包分析
	o http chunk机制分析
	o HTTP-FLV拉流实战
	o FFmpeg HTTP-FLV源码分析

RTSP流媒体实战	o RTSP协议分析
	o RTP协议分析
	o H264 RTP封装
	o H264 RTP解析
	o AAC RTP封装
	o AAC RTP解析
	o RTCP协议分析
	o RTSP流媒体服务器搭建
	o RTSP推流实战
	o RTSP拉流实战
	o wireshark抓包分析

5、SRS流媒体服务器

SRS 3.0源码剖析	o 整体框架分析
	o RTMP推流分析
	o RTMP拉流分析
	o HLS拉流分析
	o HTTP-FLV拉流分析
	o FFmpeg转码分析
	o 首屏秒开技术分析
	o forward集群源码分析
	o edge集群源码分析
	o 负载均衡部署方式

6、WebRTC实战

WebRTC中级开发	o WebRTC通话原理分析
	o WebRTC开发环境搭建
	o coturn最佳搭建方法
	o 如何采集音视频数据
	o 一对一通话时序分析
	o 信令服务器设计
	o SDP分析
	o Candidate类型分析
	o Web一对一通话
	o Web和Android通话
	o AppRTC快速演示

WebRTC高级开发	o 自定义摄像头分辨率
	o 码率限制
	o 调整编码器顺序
	o Mesh模型多方通话
	o Janus框架分析
	o Janus Web客户端源码分析
	o Janus Android客户端源码分析
	o Janus Windows客户端源码分析
	o Janus信令设计
	o 基于Janus实现会议系统
	o WebRTC源码编译

Janus服务器源码分析	o 源码结构
	o 插件机制
	o 线程分析
	o 信令交互过程
	o videoroom分析

SRS4.x源码分析	o RTMP转发WebRTC逻辑
	o WebRTC转发RTMP逻辑
	o WebRTC音视频一对一通话
	o WebRTC多人通话
	o WebRTC SFU模型分析
	o stun分析
	o turn分析
	o sdp分析
	o rtp分析
	o srtp分析
	o 拥塞控制算法
	o FEC
	o jitter buffer

7、Android NDK开发

音视频开发	o So库适配总结
	o JNI Native层构建 Java 对象
	o JNI异常处理
	o 编译FFmpeg
	o 编译ijkplayer
	o 基于ijkplayer二次开发
	o OpenSL ES播放音频数据
	o MediaCodec硬件解码
	o OpenGL ES Shader显示视频
	o RTMP推流直播
GSYVideoPlayer源码分析	o 多视频同时播放
	o gif截图
	o 边播放边缓存
	o 水印
	o 弹幕

总结：

以上就是音视频开发学习知识点，相比音视频开发自学非常困难的，网上通俗易懂的难找到，网上部分资源是对应的开源版本较低，比如雷霄骅(雷神)博客的FFmpeg版本较低，音视频涉及大量的开源库和协议，比如ffmpeg的编译，如果不熟悉各种编译报错，Janus编译涉及各种开源组件编译不通过，比如WebRTC涉及的RTP RTCP SDP STUN等协议，部分嵌入式音视频的朋友技术面窄，技术不深入。

学习资料：

视频流媒体高级开发知识点学习视频点击 音视频学习资料 获取

音视频高级开发系统学习视频：FFmpeg/WebRTC/RTMP/RTSP/HLS/RTP播放器-音视频流媒体高级开发学习