AVFoundation是可用于播放和创建基于时间的视听媒体的几种框架之一。它提供了一个Objective-C接口,您可以使用该接口详细处理基于时间的视听数据。例如,您可以使用它来检查、创建、编辑或重新编码媒体文件。您还可以从设备中获取输入流,并在实时捕获和回放期间操纵视频。图I-1显示了iOS上的体系结构。

通常,您应该使用可用的最高级别抽象来执行您想要的任务。
如果您只是想播放电影,请使用AVKit框架。
在iOS上,要在只需要对格式进行最小控制的情况下录制视频,请使用UIKit框架(UIImagePickerController)。
但是,请注意,在AVFoundation会中使用的一些原始数据结构,包括与时间相关的数据结构和不透明对象来承载和描述媒体数据,它们都在核心媒体框架中声明。
AVFoundationframework api提供与视频相关,与音频相关。旧的音频相关类提供了处理音频的简单方法。
要播放声音文件,可以使用AVAudioPlayer。
要录制音频,可以使用AVAudioRecorder。
您还可以使用AVAudioSession配置应用程序的音频行为;这在《音频会话编程指南》中有介绍。

用AVFoundation表示和使用媒体

AV基础框架用来表示媒体的主要类是AVAsset。框架的设计在很大程度上受这种表示法的指导。了解其结构将帮助您了解框架的工作原理。AVAsset实例是一个或多个媒体数据(音频和视频曲目)集合的聚合表示。它提供有关集合整体的信息,例如其标题、持续时间、自然呈现大小等。AVAsset与特定的数据格式无关。AVAsset是其他类的超类,用于从URL处的媒体创建asset实例(请参见使用资产)和创建新组合(请参见编辑)。
asset中的每个单独的媒体数据块都是统一类型的,称为轨迹(track)。在典型的简单情况下,一个轨迹表示音频分量,另一个轨迹表示视频分量;然而,在复杂的构图中,可能有多个音频和视频的重叠轨迹。asset也可能有元数据。
AVFoundation的一个重要概念是,初始化一个Asset或一个track并不一定意味着它已经准备好使用。计算项目的持续时间可能需要一些时间(例如,MP3文件可能不包含摘要信息)。在计算值时,您不需要阻塞当前线程,而是请求值并通过使用块定义的回调异步返回答案。
相关章节:使用asset、时间和媒体表示

回放

AVFoundation允许您以复杂的方式管理asset的播放。为了支持这一点,它将asset的表示状态与asset本身分开。例如,这允许您以不同的分辨率同时播放同一asset的两个不同片段。asset的表示状态由播放器项对象管理;资源中每个曲目的显示状态由播放器项曲目对象管理。例如,使用播放器项目和播放器项目轨迹,可以设置播放器显示项目视觉部分的大小,设置要在播放期间应用的音频混合参数和视频合成设置,或者在播放期间禁用资源的组件。
使用播放器对象播放播放器项目,并将播放器的输出定向到核心动画层。您可以使用播放机队列按顺序安排播放机项目集合的播放。

读取、写入和重新编码asset

AVFoundation允许您以多种方式创建asset的新表示。您可以简单地对现有asset重新编码,或者在iOS 4.1及更高版本中,您可以对asset的内容执行操作,并将结果保存为新asset。
您可以使用导出会话将现有资源重新编码为由少量常用预设之一定义的格式。如果您需要对转换进行更多控制,在iOS 4.1及更高版本中,您可以同时使用asset读取器和asset写入器对象将资产从一种表示转换为另一种表示。例如,使用这些对象,可以选择要在输出文件中表示的轨迹,指定自己的输出格式,或在转换过程中修改资源。
要生成波形的可视表示,请使用资源读取器读取资源的音频轨迹。

缩略图

要创建视频演示文稿的缩略图,请使用要从中生成缩略图的资源初始化AVAssetImageGenerator的实例。AVAssetImageGenerator使用默认启用的视频曲目生成图像。

编辑

AVFoundation使用合成从现有媒体片段(通常是一个或多个视频和音频曲目)创建新asset。您可以使用可变组合来添加和删除轨迹,并调整它们的时间顺序。您还可以设置音轨的相对音量和渐变;并设置视频轨迹的不透明度和不透明度渐变。composition是存储在内存中的媒体片段的集合。使用导出会话导出合成时,它将折叠为文件。
您还可以使用asset写入器从媒体(如样本缓冲区或静态图像)创建asset。

静态和视频媒体捕获

摄像机和麦克风的录制输入由捕获会话管理。捕获会话协调从输入设备到输出(如电影文件)的数据流。即使会话正在运行,也可以为单个会话配置多个输入和输出。向会话发送消息以启动和停止数据流。
此外,可以使用预览层的实例向用户显示摄影机正在录制的内容。

基于AVFoundation的并发编程

AVFoundation调用块、键值观察器和通知处理程序的回调不保证在任何特定线程或队列上进行。相反,AVFoundation在执行内部任务的线程或队列上调用这些处理程序。
关于通知和线程,有两个一般准则:
与UI相关的通知发生在主线程上。
需要您创建和/或指定队列的类或方法将在该队列上返回通知。
除了这两条准则(参考文档中也有例外),您不应该假设在任何特定线程上都会返回通知。
如果您正在编写多线程应用程序,可以使用NSThread方法isMainThread或[[NSThread currentThread]isEqual:<#存储的线程引用#>]来测试调用线程是否是您希望在其上执行工作的线程。您可以使用诸如performSelectorOnMainThread:withObject:waitUntilDone:和performSelector:onThread:withObject:waitUntilDone:modes:等方法将消息重定向到适当的线程。您还可以使用dispatch_async“跳转”到相应队列上的块,该队列可以是UI任务的主队列,也可以是您为并发操作准备的队列。有关并发操作的更多信息,请参阅《并发编程指南》;有关块的更多信息,请参见块编程主题。AVCam iOS:使用AVFoundation捕获图像和电影示例代码被认为是所有AVFoundation功能的主要示例,可以参考AVFoundation的线程和队列使用示例。

先决条件

AVFoundation是一个高级Cocoa框架。要有效地使用它,您必须具备:
对基本可可开发工具和技术有深入的了解
对方块的基本掌握
基本了解键值编码和键值观察
对于播放,了解核心动画的基本知识(请参阅《核心动画编程指南》,对于基本播放,请参阅《AVKit框架参考》。

AVFoundation(一)相关推荐

  1. IOS 自定义相机, 使用 AVFoundation(附实现部分腾讯水印相机功能 demo)

    原文链接:http://www.jianshu.com/p/c64bf543f16a 这是一款使用 AVFoundation 自定义的相机,与系统原生相机有一样的外观但比系统的相机更好.更符合实际的开 ...

  2. iOS 视频捕获系列Swift之AVFoundation(一)

    iOS 视频捕获系列之AVFoundation(一) AVCaptureMovieFileOutput系列 在iOS开发过程中,或多或少的都涉及视频的操作. 尤其在去年直播行业的带动下,移动端对视频的 ...

  3. iOS使用AVFoundation在视频上添加字幕以及控制字幕时间

    IOS在视频上添加字幕效果的基本思路是: 使用自定义的CATextLayer文字图层或者CAShapeLayer文字图层,添加到视频的Layer上创建用户自定义的字幕效果.这两者的区别是:CAText ...

  4. (0070)iOS开发之AVFoundation枚举属性注解

    转载: http://www.jianshu.com/p/5e56e35217bf 我们可以通过设置AVCaptureSession的一些属性来改变捕捉画面的质量 但是要注意:size相关的属性的时候 ...

  5. AVFoundation 文本转语音和音频录制 播放

    现在你应该对AVFoundation有了比较深入的了解,并且对数字媒体的细节也有了一定认识,下面介绍一下 AVFoundation的文本转语音功能 AVSpeechSynthesizer 开发者可以使 ...

  6. AVFoundation和 GPUImage初探

    from:http://vonglo.me/2014/08/24/AVFoundation%E5%92%8C-GPUImage%E5%88%9D%E6%8E%A2/ 最近在做视频相关的东西,然后熟悉了 ...

  7. iOS之播放音效(AVFoundation)

    前提需要导入<AVFoundation/AVFoundation.h>框架 #import "ViewController.h" #import <AVFound ...

  8. AVFoundation 简介

    AVFoundation 框架 简介 AVFoundation 框架是iOS中专门处理音视频的框架,其中集成了音频播放以及处理和视频播放处理以及采集等功能(实现录制,编辑和播放音视频功能):以及配置音 ...

  9. iOS中AVFoundation的简单使用—音乐的播放

    2019独角兽企业重金招聘Python工程师标准>>> #import "ViewController.h" #import <AVFoundation/A ...

  10. 本地音频播放,使用AVFoundation.framework中的AVAudioPlayer来实现

    本地音频播放,使用AVfoundation.framework中的AVAudioPlayer来实现 /*AVAudioPlayer的使用比较简单: 1.初始化AVAudioPlayer对象,此时通常指 ...

最新文章

  1. Bzoj2780: [Spoj]8093 Sevenk Love Oimaster
  2. r语言logistic回归_R语言多分类logistic逻辑回归模型在混合分布模拟单个风险损失值评估的应用...
  3. 菜鸟解读qt源码----qsqlfield.h
  4. Modelsim初级使用教程
  5. Github Pages建立个人博客
  6. C++静态成员函数指针
  7. 纸质书,电子书,你会选择通过哪一种途径学习?
  8. Lua笔记3 函数和数组
  9. ZOJ 3987 2017CCPC秦皇岛 G:Numbers(高精度+贪心)
  10. 控制用户创建课程权限
  11. Unity工程导入到AndroidStudio的一些注意事项
  12. LBS基站定位接口代码示例
  13. CSS盒模型完整介绍
  14. 工业互联网+危化安全生产综合管理平台怎样建
  15. linux下实现线程暂停
  16. C语言数据结构——广义表
  17. 抖音跳转微信加好友功能实现解析
  18. 数据挖掘基础:独立性检验
  19. NVL和COALESCE的区别
  20. 部署tomcat、nginx整合tomcat、tomcat+memcached集群

热门文章

  1. 【双卡尔曼滤波】基于simulink仿真的双卡尔曼滤波
  2. java服务端用到的javase的基础知识_javase基础篇知识归纳
  3. 高空核爆与雷电电磁脉冲特征及能量吸收技术(摘要)
  4. P2608 [ZJOI2010]任务安排
  5. 生命中最美的风景就是曾经遇见了你
  6. iota 的 优点与吐槽
  7. 计算机的资源管理器是电脑上的哪个图标,Win10资源管理器中“此电脑”光驱图标不见了怎么办?解决方法...
  8. 《数据出境安全评估办法》将正式施行,聊聊数据出境安全合规那些事
  9. 【报告分享】2021年度小红书高效种草营销手册-标记我的生活-小红书(附下载)
  10. 鸢(yuan)尾花分类任务