一、FFmpeg 简介

FFmpeg 是 " Fast Forward mpeg " 的缩写 , 其符合 mpeg 视频编码标准 ;

FFmpeg 功能很强大 , 可以对音视频进行格式转换 , 内容修改 , 等几乎所有涉及音视频的操作 ;

爱奇艺 , 优酷 , YouTube 等公司的音视频产品 , 几乎都是基于 FFmpeg 进行的二次开发 ;

二、FFmpeg 相关术语

1、容器

容器 Container : 容器的本质就是文件 , 是特定的视频文件 , 如 mp4 , mkv , flv 等格式的音视频文件 ;

容器的作用 : 容器中可以存放音频 , 视频 , 字幕流等信息 , 将这些信息整合在一起 , 按照特定规则放置在容器文件中 ,

使用 MediaInfo 打开一个 mp4 格式的视频文件 , 在 " 容器格式和一般信息 " 一栏中 , 可以看到该 mp4 容器文件中包含了 111 个 AVC 视频流 , 111 个 AAC LC 音频流 ;

MediaInfo 工具在 http://mediaarea.net/en/MediaInfo 地址下载 , 或本博客的博客资源中下载 ;

2、媒体流

媒体流 ( Stream ) : 时间上的一段连续数据 , 一段声音数据称为音频流 , 一段视频数据称为视频流 , 一段字幕数据称为字幕流 ;

这些媒体流数据可以压缩 , 也可以不压缩 , 如视频流以 H.264 格式进行压缩 , 将视频帧编码成关键帧 , 非关键帧 , 音频流一般是 AAC 编码格式进行压缩 ;

媒体流如果是压缩的 , 在播放时 , 先使用解码器解码 , 然后再播放 ; 生成文件时需要使用编码器 , 编码后存储到文件中 ;

3、数据帧

数据帧 ( Data Frame ) : 媒体流由若干数据帧构成 ; 压缩格式中 , 数据帧是最小的处理单元 ;

在容器中如果有多个数据流 , 那么视频帧 , 音频帧 , 字幕信息 , 交错存储 , 以保证实时性 ;

数据帧是未压缩的原始数据 , 如 : 视频帧每一帧都是一张完整的 YUV 图片 , 音频帧是 PCM 格式的 ;

4、数据包

数据包 ( Data Packet ) : 将数据帧压缩后就是数据包 , 数据帧是未压缩的原始数据 , 数据包时压缩后的数据 ;

生成容器文件时 , 压缩数据 , 将数据帧编码压缩成数据包 ;

播放容器文件时 , 解压数据 , 将数据包解码展开成数据帧 ;

视频编码过程 : YUV 格式的图像 -> H.264 编码器编码 -> H.264 视频帧
视频解码过程 : H.264 视频帧 -> H.264 解码器解码 -> YUV 格式的图像

音频数据编码过程 : PCM 音频数据 -> ACC 编码器编码 -> AAC 音频帧
音频数据解码过程 : AAC 音频帧 -> AAC 解码器解码 -> PCM 音频数据

5、编解码器

编解码器 ( Codec ) : 数据帧 ( 原始数据 ) 与数据包 ( 压缩数据 ) 之间的转换工具 ;

数据帧 ( 原始数据 ) -> 编解码器 ( 编码 ) -> 数据包 ( 压缩数据 )

数据包 ( 压缩数据 ) -> 编解码器 ( 解码 ) -> 数据帧 ( 原始数据 )

6、复用

复用 ( Mux ) : 将不同的媒体流流 , 按照一定规则放入容器 ;

音频流 , 视频流 , 字幕流 ,
按照一定规则
封装到容器 ( 视频文件 ) 中 ;

复用的关键工具时复用器 ( Muxer ) ;

7、解复用

解复用 ( Demux ) : 从容器中解析不同的流出来 ;

从容器 ( 视频文件 ) 中 ,
按照一定规则
拆分出音频流 , 视频流 , 字幕流 ,

解复用的关键工具时解复用器 ( Demuxer ) ;

博客资源

https://download.csdn.net/download/han1202012/19555927

【FFmpeg】FFmpeg 相关术语简介 ( 容器 | 媒体流 | 数据帧 | 数据包 | 编解码器 | 复用 | 解复用 )相关推荐

【FFmpeg】FFmpeg 相关术语简介二
文章目录一.码率与帧率二.ffmpeg.ffplay.ffprobe 可执行文件一.码率与帧率帧率 : 帧频率 , 视频中每秒钟含有视频帧的帧数 , 一秒钟刷新多少张图像 , 连续移动的图像至 ...
HTTP协议简介_请求消息/请求数据包/请求报文_响应消息/响应数据包/响应报文
文章目录 HTTP 介绍请求数据包/请求消息/请求报文请求数据包解析响应数据包/响应消息/响应报文 HTTP 介绍概念:Hyper Text Transfer Protocol 超文本传输协议 ...
java 直播媒体流服务（ffmpeg、javacv）支持本地视频、网路视频
还在为视频推流和拉流而烦恼吗?还在为安装nginx.ffmpeg而头疼吗?只需要两步就可以省去这些烦恼,第一步:推流第二步:播放,你确定不入手么一.添加媒体流服务依赖包 maven pom.xml ...
【FFmpeg】使用 FFmpeg 处理音视频格式转换流程 ( 解复用 | 解码 | 帧处理 | 编码 | 复用 )
FFmpeg 系列文章目录 [FFmpeg]Windows 搭建 FFmpeg 命令行运行环境 [FFmpeg]FFmpeg 相关术语简介 [FFmpeg]FFmpeg 相关术语简介二 [FFmpe ...
FFmpeg从入门到牛掰（一）：解复用(demux)讲解
转载请注明出处:https://blog.csdn.net/impingo 项目地址:https://github.com/im-pingo/pingos 解复用讲解概念解复用操作函数调用流程 ...
ffmpeg——ffmpeg简要
FFmpeg是一套可以用来记录.转换数字音频.视频,并能将其转化为流的开源计算机程序.采用LGPL或GPL许可证.它提供了录制.转换以及流化音视频的完整解决方案.它包含了非常先进的音频/视频编解码库l ...
快速了解WDM波分复用器的相关术语
快速导读: 常用的WDM波分复用技术:介质薄膜滤波器TFF(Thin Film Filter).阵列波导光栅AWG WDM器件结构:C-lens和G-lens 光纤准直器(fiber collimat ...
【四】【vlc-android】播放控制交互与demux解复用层、媒体数据流拉取层的具体数据传递和控制流程源码分析
1.VLC中有很多demux/mux/encoder/decoder模块,因此需要先了解这些模块的加载原理,模块的加载原理基本一致,因此举例分析MP4解复用模块如何加载完成的,主要流程如下: // v ...
FFMPEG API函数根据SDP文件接收RTP媒体流
背景版本ffmpeg 3.3.3:使用 FFmpeg实时接收rtp 音频和视频流,并生成视频文件. 在网上查阅了大量资料,基本上都是使用命令行来接收rtp媒体流的,由于项目中不得不使用ffmpeg接 ...

【FFmpeg】FFmpeg 相关术语简介 ( 容器 | 媒体流 | 数据帧 | 数据包 | 编解码器 | 复用 | 解复用 )

文章目录