iOS直播研发初了解

先转一张图

直播类的app基本的思维导图：

1.音视频的采集

通过AVFoundation框架来获取来获取音视频数据。

2.视频处理

视频也就是一张张的图片图片构成。那么图片就能做很多事情，但是又不可能如同图片那么简单的处理。需要用到GPUImage框架。

3.音视频编码

FFempeg，X264框架，videoToolbox，AudioToolbox

数据是AVFoundation采集，最后在 AVCaptureVideoDataOutputSampleBufferDelegate 的代理方法中获取。也就是

-(void)captureOutput:(AVCaptureOutput *)captureOutput didOutputSampleBuffer:(CMSampleBufferRef)sampleBuffer fromConnection:(AVCaptureConnection *)connection

中，通过AVCaptureOutput来确定收集的是音频还是视频,分别是:AVCaptureVideoDataOutput

和AVCaptureAudioDataOutput。

4.推流

根据服务端的流媒体进行数据传输

5.分发（服务端）

这个进行数据分发，在分发之前可以有鉴黄，截屏，实时转码

6.拉流

没啥好说的

7.音视频解码

FFempeg，X264框架，videoToolbox，AudioToolbox

用以上框架进行解码

8.播放

以上内容就是对直播研发的初步了解，其实也就是一个流程或者思维导图。

其实直播这块需要学的还有很多，如：音频及视频的基础知识这些。了解后对音视频的开发会有很多帮助。

以后如有更多的好东西继续学习并记录。

iOS直播研发初了解相关推荐

iOS直播app原理
一.个人见解(直播难与易) 直播难:个人认为要想把直播从零开始做出来,绝对是牛逼中的牛逼,大牛中的大牛,因为直播中运用到的技术难点非常之多,视频/音频处理,图形处理,视频/音频压缩,CDN分发,即时通 ...
开发一个完整的iOS直播app必须技能
今年,直播行业火了,当然也诞生了一大批网红,甚至明星也开始直播了,因此现在都要搞直播了!由于第一次接触,花了很多时间了解直播,目前整理了直播的原理(因为项目汇报的需要就整理了一下),现在只是展示一下从 ...
（转）【如何快速的开发一个完整的iOS直播app】(原理篇)
原文链接:https://www.jianshu.com/p/bd42bacbe4cc [如何快速的开发一个完整的iOS直播app](原理篇) [如何快速的开发一个完整的iOS直播app](原理篇) ...
如何快速的开发一个完整的iOS直播app(原理篇)
本文转自袁峥Seemygo的博客分享.觉得很不错.特意粘来给大家分享. 1.一个完整直播app功能(来自落影loyinglin分享) 1.聊天私聊.聊天室.点亮.推送.黑名单等; 2.礼物普通礼物 ...
如何快速开发一个完整的ios直播app
如何快速开发一个完整的iOS直播app 一.个人见解(直播难与易) 直播难:个人认为要想把直播从零开始做出来,绝对是牛逼中的牛逼,大牛中的大牛,因为直播中运用到的技术难点非常之多,视频/音频处理,图形 ...
iOS 直播专题3-前置处理
前置处理对视频添加美颜.水印.滤镜等对音频进行混音.消除环境音.声音特效等上一篇iOS 直播专题2-音视频采集提到视频采集采用的是GPUImage框架,这个框架集成了很多滤镜效果这里主要介绍美 ...
1小时学会：最简单的iOS直播推流（十一）spspps和AudioSpecificConfig介绍（完结）
最简单的iOS 推流代码,视频捕获,软编码(faac,x264),硬编码(aac,h264),美颜,flv编码,rtmp协议,陆续更新代码解析,你想学的知识这里都有,愿意懂直播技术的同学快来看!! 源 ...
1小时学会：最简单的iOS直播推流（十）librtmp使用介绍
最简单的iOS 推流代码,视频捕获,软编码(faac,x264),硬编码(aac,h264),美颜,flv编码,rtmp协议,陆续更新代码解析,你想学的知识这里都有,愿意懂直播技术的同学快来看!! 源 ...
1小时学会：最简单的iOS直播推流（八）h264/aac 软编码
最简单的iOS 推流代码,视频捕获,软编码(faac,x264),硬编码(aac,h264),美颜,flv编码,rtmp协议,陆续更新代码解析,你想学的知识这里都有,愿意懂直播技术的同学快来看!! 源 ...

iOS直播研发初了解

iOS直播研发初了解相关推荐

最新文章

热门文章