基本概念讲解

媒体：是表示，传输，存储信息的载体，常人们见到的文字、声音、图像、图形等都是表示信息的媒体。

多媒体：是声音、动画、文字、图像和录像等各种媒体的组合，以图文并茂，生动活泼的动态形式表现出来，给人以很强的视觉冲击力，留下深刻印象

多媒体技术：是将文字、声音、图形、静态图像、动态图像与计算集成在一起的技术。它要解决的问题是计算机进一步帮助人类按最自然的和最习惯的方式接受和处理信息。

流媒体：流媒体是指采用流式传输的方式在Internet播放的连续时基媒体格式，实际指的是一种新的媒体传送方式，而不是一种新的媒体格式（在网络上传输音/视频等多媒体信息现在主要有下载和流式传输两种方式）流式传输分两种方法：实时流式传输方式(Realtime streaming)和顺序流式传输方式(progressive streaming)。

多媒体文件：是既包括视频又包括音频，甚至还带有脚本的一个集合，也可以叫容器；

媒体编码：是文件当中的视频和音频所采用的压缩算法。也就是说一个avi的文件，当中的视频编码有可能是A，也可能是B，而其音频编码有可能是1，也有可能是2。转码：指将一段多媒体包括音频、视频或者其他的内容从一种编码格式转换成为另外一种编码格式

视频：连续的图象变化每秒超过24帧（Frame）画面以上时，根据视觉暂留原理，人眼无法辨别单幅的静态画面，看上去是平滑连续的视觉效果，这样连续的画面叫做视频

音频 ：人类能听到的声音都成为音频，但是一般我们所说到的音频时存储在计算机里的声音

基本视频概念：

码率：码率就是数据传输时单位时间传送的数据位数,一般我们用的单位是kbps即千位每秒。 通俗一点的理解就是取样率，

单位时间内取样率越大，精度就越高，处理出来的文件就越接近原始文件，但是文件体积与取样率是成正比的，所以几乎所

有的编码格式重视的都是如何用最低的码率达到最少的失真。但是因为编码算法不一样，所以也不能用码率来统一衡量音质

或者画质



帧：帧就是一段数据的组合，它是数据传输的基本单位。就是影像动画中最小单位的单幅影像画面，相当于电影胶片上的每



一格镜头。 一帧就是一副静止的画面，连续的帧就形成动画，如电视图像等。



帧率：帧率即每秒显示帧数，帧率表示图形处理器处理场时每秒钟能够更新的次数。高的帧率可以得到更流畅、更逼真的动画。



一般来说30fps就是可以接受的，但是将性能提升至60fps则可以明显提升交互感和逼真感，但是一般来说超过75fps一般就不



容易察觉到有明显的流畅度提升了。如果帧率超过屏幕刷新率只会浪费图形处理的能力，因为监视器不能以这么快的速度更新



，这样超过新率的帧率就浪费掉了。





关键帧：相当于二维动画中的原画，指角色或者物体运动或变化中的关键动作所处的那一帧，它包含了图像的所有信息，后来



帧仅包含了改变了的信息。如果你没有足够的关键帧，你的影片品质可能比较差，因为所有的帧从别的帧处产生。对于一般的



用途，一个比较好的原则是每5秒设一个关键键。但如果时那种实时传输的流文件，那么要考虑传输网络的可靠度，所以要1到



2秒增加一个关键帧。


关于视频帧类型的一点总结，如有不足之处，敬请指出:)


1.I、P、B帧概念简述


视频压缩中，每帧代表一幅静止的图像。而在实际压缩时，会采取各种算法减少数据的容量，其中IPB就是最常见的。简单地说，I帧是关键帧，属于帧内压缩，解码时单独的该帧便可完成解码；P帧为向前预测编码帧，即P帧解码时需要参考前面相关帧的信息才能解码；B帧为双向预测编码帧，解码时既需要参考前面已有的帧又需要参考后面待解码的帧；他们都是基于I帧来压缩数据。


I帧表示关键帧，I帧画面完整保留，解码时只需要本帧数据就可以完成（因为包含完整画面）。


P帧表示的是这一帧跟之前的一个关键帧（或P帧）的差别，解码时需要用之前缓存的画面叠加上本帧定义的差别，生成最终画面。（也就是差别帧，P帧没有完整画面数据，只有与前一帧的画面差别的数据）


B帧是双向差别帧，也就是B帧记录的是本帧与前后帧的差别，换言之，要解码B帧，不仅要取得之前的缓存画面，还要解码之后的画面，通过前后画面的与本帧数据的叠加取得最终的画面。B帧压缩率高，但是解码时CPU会比较累。


因此，I帧和P帧的解码算法比较简单，资源占用也比较少，I帧只要自己完成就行了，至于P帧，也只需要解码器把前一个画面缓存一下，遇到P帧时就使用之前缓存的画面就行。如果视频流只有I和P，解码器可以不管后面的数据，边读边解码，线性前进。如果视频流还有B帧，则需要缓存前面和当前的视频帧，待后面视频帧获得后，再解码。


2.I、P、B帧特点分析


I帧特点:


1.它是一个全帧压缩编码帧。它将全帧图像信息进行JPEG压缩编码及传输;


2.解码时仅用I帧的数据就可重构完整图像;


3.I帧描述了图像背景和运动主体的详情;


4.I帧不需要参考其他画面而生成;


5.I帧是P帧和B帧的参考帧(其质量直接影响到同组中以后各帧的质量);


6.I帧是帧组GOP的基础帧(第一帧),在一组中只有一个I帧;


7.I帧不需要考虑运动矢量;


8.I帧所占数据的信息量比较大。


P帧特点: 1.P帧是I帧后面相隔1~2帧的编码帧;


2.P帧采用运动补偿的方法传送它与前面的I或P帧的差值及运动矢量(预测误差);


3.解码时必须将I帧中的预测值与预测误差求和后才能重构完整的P帧图像;


4.P帧属于前向预测的帧间编码。它只参考前面最靠近它的I帧或P帧;


5.P帧可以是其后面P帧的参考帧,也可以是其前后的B帧的参考帧;


6.由于P帧是参考帧,它可能造成解码错误的扩散;


7.由于是差值传送,P帧的压缩比较高。


B帧特点 1.B帧是由前面的I或P帧和后面的P帧来进行预测的;


2.B帧传送的是它与前面的I或P帧和后面的P帧之间的预测误差及运动矢量;


3.B帧是双向预测编码帧;


4.B帧压缩比最高,因为它只反映丙参考帧间运动主体的变化情况,预测比较准确;


5.B帧不是参考帧,不会造成解码错误的扩散。


1.I、P、B帧概念简述


视频压缩中，每帧代表一幅静止的图像。而在实际压缩时，会采取各种算法减少数据的容量，其中IPB就是最常见的。简单地说，I帧是关键帧，属于帧内压缩，解码时单独的该帧便可完成解码；P帧为向前预测编码帧，即P帧解码时需要参考前面相关帧的信息才能解码；B帧为双向预测编码帧，解码时既需要参考前面已有的帧又需要参考后面待解码的帧；他们都是基于I帧来压缩数据。


I帧表示关键帧，I帧画面完整保留，解码时只需要本帧数据就可以完成（因为包含完整画面）。


P帧表示的是这一帧跟之前的一个关键帧（或P帧）的差别，解码时需要用之前缓存的画面叠加上本帧定义的差别，生成最终画面。（也就是差别帧，P帧没有完整画面数据，只有与前一帧的画面差别的数据）


B帧是双向差别帧，也就是B帧记录的是本帧与前后帧的差别，换言之，要解码B帧，不仅要取得之前的缓存画面，还要解码之后的画面，通过前后画面的与本帧数据的叠加取得最终的画面。B帧压缩率高，但是解码时CPU会比较累。


因此，I帧和P帧的解码算法比较简单，资源占用也比较少，I帧只要自己完成就行了，至于P帧，也只需要解码器把前一个画面缓存一下，遇到P帧时就使用之前缓存的画面就行。如果视频流只有I和P，解码器可以不管后面的数据，边读边解码，线性前进。如果视频流还有B帧，则需要缓存前面和当前的视频帧，待后面视频帧获得后，再解码。


2.I、P、B帧特点分析


I帧特点:


1.它是一个全帧压缩编码帧。它将全帧图像信息进行JPEG压缩编码及传输;


2.解码时仅用I帧的数据就可重构完整图像;


3.I帧描述了图像背景和运动主体的详情;


4.I帧不需要参考其他画面而生成;


5.I帧是P帧和B帧的参考帧(其质量直接影响到同组中以后各帧的质量);


6.I帧是帧组GOP的基础帧(第一帧),在一组中只有一个I帧;


7.I帧不需要考虑运动矢量;


8.I帧所占数据的信息量比较大。


P帧特点: 1.P帧是I帧后面相隔1~2帧的编码帧;


2.P帧采用运动补偿的方法传送它与前面的I或P帧的差值及运动矢量(预测误差);


3.解码时必须将I帧中的预测值与预测误差求和后才能重构完整的P帧图像;


4.P帧属于前向预测的帧间编码。它只参考前面最靠近它的I帧或P帧;


5.P帧可以是其后面P帧的参考帧,也可以是其前后的B帧的参考帧;


6.由于P帧是参考帧,它可能造成解码错误的扩散;


7.由于是差值传送,P帧的压缩比较高。


B帧特点 1.B帧是由前面的I或P帧和后面的P帧来进行预测的;


2.B帧传送的是它与前面的I或P帧和后面的P帧之间的预测误差及运动矢量;


3.B帧是双向预测编码帧;


4.B帧压缩比最高,因为它只反映丙参考帧间运动主体的变化情况,预测比较准确;


5.B帧不是参考帧,不会造成解码错误的扩散。
												


											

音视频基础 、IPB帧及其特点相关推荐
	

    
						
  1. 音视频基础: I帧 P帧 B帧 GOP DIR PTS DTS 帧率 码率的介绍
		
    目录标题 基本概念 帧的介绍 I帧:帧内编码帧 P帧:前向预测编码帧 B帧:双向预测内插编码帧 IPB帧的区别 DTS和PTS GOP(序列)和IDR I帧和IDR帧的异同 帧率(FPS)和码率(BP ...
    
		
    2. 
						
  2. 音视频开发--音视频基础
		
    音视频基础 一.音视频录制原理 视频录制流程 1.准备摄像头 2.图像帧阶段 从摄像头采集视频数据(图像帧),采集数据格式:YUV或者RGB,YUV和RGB细分的话还包括YUV 4:4:4.YUV 4 ...
    
		
    3. 
						
  3. 《音视频开发进阶指南》读书笔记（一） —— 音视频基础概念
		
    前言 最近要学音视频,在图书馆借到这本<音视频开发进阶指南>,读了一段时间觉得挺好就在某宝买了. 以后一段时间应该都会沉浸在研究音视频中,开个专题记录哈每一章的读书笔记吧(以iOS开发的角 ...
    
		
    4. 
						
  4. 音视频流媒体高级开发进阶：从音视频基础知识到技术实践
		
    站在音视频行业风口 站在风口,猪也能飞".在已经到来的2022年,音视频行业依旧是怎么也绕不过去的风口. 一方面,随着各项5G政策的落实,音视频+5G风口,将会深入挖掘音视频产业的无限潜力, ...
    
		
    5. 
						
  5. ffmpeg音视频基础知识
		
    ffmpeg音视频基础知识 前言 一.图像的基础知识 二.视频编码基础知识 1.视频和图片之间的关系 2.为什么要编码? 3.什么是编码? 视频相关专业术语 提示:文章写完后,目录可以自动生成,如何生 ...
    
		
    6. 
						
  6. 音视频基础学习之【01.基于ffmpeg的简单播放器demo实现】
		
    目录 1.项目配置 2.显示界面设计 3.视频解码显示 流程描述 4.演示 最近在学习音视频基础知识,在这里感谢雷神留下的一系列指引新手入门的宝贵资源,虽然他英年早逝,但他的硕果永存.不由感慨真是天妒 ...
    
		
    7. 
						
  7. 视频编码（3）：H.266 编码性能比 H.265 再提升 49% 的关键丨音视频基础
		
    ​ 我们在前文视频编码(2):H.265 如何比 H.264 提升 40% 编码效率丨音视频基础_音视频开发老马的博客-CSDN博客中探讨了 H.264 视频编码的基本概念.编码工具.编码流程及码流结 ...
    
		
    8. 
						
  8. 查看视频的IPB帧，IPB帧编码顺序，视频的第一帧图片
		
    > 如何查看视频的IPB帧 Android, 如何获取视频的每一帧的信息 视频 = 图片.图像(摄像头) + 声音(麦克风) : 谷歌官方给我们的提供的api接口类:MediaMetadataR ...
    
		
    9. 
						
  9. C++实战手把手教您用ffmpeg和QT开发播放器--01音视频基础知识
		
    笔记:https://blog.csdn.net/tainjau/article/category/9272757 音视频基础知识 封装.解码.重采样.像素格式 1.MPEG-4 MPEG-4标准将众 ...
    
		
    10. 
						
  10. 【Android FFMPEG 开发】音视频基础 和 FFMPEG 编译 ( 音视频基础 | MPEG-4 标准 |  Android 开发环境 | FFMPEG 交叉编译 | 安卓项目导入配置 )
		
    本篇博客代码及资源下载 : https://download.csdn.net/download/han1202012/10382762 文章目录 一. 音视频基础 1. 音频基础 (1) 声音要素  ...
    
		
    11. 
		


					

最新文章
	

    
						
  1. 国外十大最流行PHP框架排名
		
    2. 
						
  2. 豪赌 ARM 梦碎：63 岁孙正义的「花甲历险记」
		
    3. 
						
  3. 车联网空间巨大 解决网络安全问题乃当务之急
		
    4. 
						
  4. javascript中Math.random()产生随机数总结
		
    5. 
						
  5. 多层次报表的性能优化方案
		
    6. 
						
  6. linux磁盘管理------LVM
		
    7. 
						
  7. java序列化写法_java-spark的各种常用算子的写法
		
    8. 
						
  8. 深度学习训练出来的损失不收敛_学习率设置技巧，使用学习率来提升我们的模型...
		
    9. 
						
  9. 利用HttpWebRequest实现实体对象的上传
		
    10. 
						
  10. 已解决：Cannot find ./catalina.sh The file is absent or does not have execute permission This file is ne
		
    11. 
						
  11. 血管穿刺机器人研究汇总
		
    12. 
						
  12. cad设计绘图软件：AutoCAD 2020 Mac版
		
    13. 
						
  13. 计算机打不开管理reg,“.reg”代码解决Win7系统自带磁盘管理打不开的故障
		
    14. 
						
  14. leapftp，小编悄悄告诉你leapftp是什么
		
    15. 
						
  15. 六维力数据中去除重力、漂移力任务---ros之talker、listener、ur、坑
		
    16. 
						
  16. 新款云开发趣味测试小程序源码+功能超多
		
    17. 
						
  17. 移植Linux 3.4.2内核到JZ2440开发板（超精讲）
		
    18. 
						
  18. css中justify用法,CSS text-justify用法及代码示例
		
    19. 
						
  19. 单相LCL并网逆变器的状态空间数学模型
		
    20. 
						
  20. 老板键2.0一键隐藏 桌面摸鱼 用于快速隐藏游戏或其他无关工作的程式
		
    21. 
		

	


热门文章
	

    
									
  1. [转]多媒体范例: 如何使用CSS来格式化TLF文本
			
    2. 
						
  2. (建议收藏) | Spring Boot集成JSON Web Token（JWT）【知识积累】
			
    3. 
						
  3. 未得冠军的运动员也有教练——Leo鉴书71
			
    4. 
						
  4. 3.HP服务器iLo安装系统镜像
			
    5. 
						
  5. 快捷方式右键菜单、任务管理器等，使用“打开文件所在位置”出现“该文件没有与之关联的应用来执行该操作”的问题解决方案
			
    6. 
						
  6. 【实践案例分享】PyFlink 在聚美优品的应用实践
			
    7. 
						
  7. MASM调试汇编代码（命令行方式）
			
    8. 
						
  8. 设置透明主题引起动画失效以及打开其他应用闪现桌面图标的问题
			
    9. 
						
  9. 技术研究：DOOM3网络模型的演化与网络架构
			
    10. 
						
  10. STIPC-003_编程挑战系列赛第三场（柯柯的期末祝福） _F.小柯来放水
			
    11.