iOS 直播专题4-音视频编码

现在的高清手机拍个照都有2M以上，按照人眼帧率24帧/秒的速度传输，网络数度需要达到2 * 24M/秒，一般日常中的网络显然不可能有这样的网速。这时就需要对音视频进行编码压缩了。

常用的编码类型有：

视频编码：H.264、H.265、VP8、VP9
音频编码：aac、Opus、mp3

生活中常说的mp4、avi、flv等指的是封装格式，就是个容器，把音视频、字幕、媒体信息等装进容器里，编码在这里充当的是压缩音视频的角色，这样才能减少体积。

名词介绍

YUV

视频裸数据的一种格式，大部分设备的视频帧数据都是YUV,“Y”表示明亮度（Luminance或Luma），也就是灰度值；而“U”和“V” 表示的则是色度（Chrominance或Chroma），作用是描述影像色彩及饱和度，用于指定像素的颜色。跟我们熟悉的RGB类似，YUV也是一种颜色编码方法。

主要用于电视系统以及模拟视频领域，它将亮度信息（Y）与色彩信息（UV）分离，没有UV信息一样可以显示完整的图像，只不过是黑白的，这样的设计很好地解决了彩色电视机与黑白电视的兼容问题。并且，YUV不像RGB那样要求三个独立的视频信号同时传输，所以用YUV方式传送占用极少的频宽。
NV12和NV21属于YUV420格式，是一种two-plane模式，苹果iOS的视频是NV12格式，Android的视频是NV21格式

H

iOS 直播专题4-音视频编码相关推荐

iOS直播技术分享-音视频采集（一）
1.iOS直播技术的流程直播技术的流程大致可以分为几个步骤:数据采集.图像处理(实时滤镜).视频编码.封包.上传.云端(转码.录制.分发).直播播放器. 数据采集:通过摄像头和麦克风获得实时的音视频 ...
FFmpeg音视频编码实战屏幕录像机视频课程-基于QT5和FFMpegSDK-夏曹俊-专题视频课程...
FFmpeg音视频编码实战屏幕录像机视频课程-基于QT5和FFMpegSDK-3798人已学习课程介绍本课程讲解的是基于流行的直播技术 FFMpeg3.3音视频处理框架,和应用广的 ...
iOS 直播专题3-前置处理
前置处理对视频添加美颜.水印.滤镜等对音频进行混音.消除环境音.声音特效等上一篇iOS 直播专题2-音视频采集提到视频采集采用的是GPUImage框架,这个框架集成了很多滤镜效果这里主要介绍美 ...
“小程序+直播”怎样搅动音视频技术生态？
责编 / 王宇豪策划 / LiveVideoStack 12月26日晚间,微信小程序开放了直播能力,并首先向社交.教育.医疗.政务民生.金融等五大应用场景开放.与原生App应用和基于浏览器的H5 ...
直播软件搭建音视频开发中的视频采集
直播软件搭建音视频开发中的视频采集前言在直播和短视频行业日益火热的发展形势下,音视频开发(采集.编解码.传输.播放.美颜)等技术也随之成为开发者们关注的重点,本系列文章就音视频开发过程中所运用到的 ...
视频教程-FFmpeg音视频编码实战屏幕录像机视频课程-基于QT5和FFMpegSDK-C/C++
FFmpeg音视频编码实战屏幕录像机视频课程-基于QT5和FFMpegSDK 夏曹俊:南京捷帝科技有限公司创始人,南京大学计算机硕士毕业,有15年c++跨平台项目研发的经验,领导开发过大量的c++虚拟 ...
走进音视频的世界——音视频编码
音视频流是通过特定编码器压缩,由一系列的压缩图像/语音帧组成.当然可能存在多种语言多音轨,每个音轨之间的音频流相互独立.还可能存在内置字幕,常见的字幕格式有sub.smi.ssa.srt等.但是,本篇 ...
iOS WebRTC多人音视频建立的流程
前言本文主要以"代码是最好的注释"为基点,介绍在处理iOS端多人音视频的建立流程. 在看本篇前建议先了解一下多人音视频通讯现在的常用架构,参考<WebRTC多人音视频聊天架 ...
弱网测试环境搭建：针对视频直播等实时音视频应用
弱网测试环境搭建:针对视频直播等实时音视频应用什么是弱网环境? 对于弱网的定义,不同的应用对弱网的定义是有一定的差别的,不仅要考虑各类型网络最低速率,还要结合业务场景和应用类型去划分.按照移动的特性 ...
【iOS】AVPlayer 播放音视频
1.常见的音视频播放器 iOS开发中不可避免地会遇到音视频播放方面的需求. 常用的音频播放器有 AVAudioPlayer.AVPlayer 等.不同的是,AVAudioPlayer 只支持本地音频的 ...

iOS 直播专题4-音视频编码

名词介绍

YUV

H

iOS 直播专题4-音视频编码相关推荐

最新文章

热门文章