转载请注明出处:http://blog.csdn.net/a512337862/article/details/72629755

今天在这里简单介绍一下,如何利用android MediaCodec解码AAC音频文件或者实时AAC音频帧并通过AudioTrack来播放。主要的思路就是从文件或者网络获取一帧帧的AAC的数据,送入解码器解码后播放。

封装AudioTrack

AudioTrack主要是用来进行主要是用来播放声音的,但是只能播放PCM格式的音频流。这里主要是简单的对AudioTrack进行了封装,加入了一些异常判断:

/*** Created by ZhangHao on 2017/5/10.* 播放pcm数据*/
public class MyAudioTrack {private int mFrequency;// 采样率private int mChannel;// 声道private int mSampBit;// 采样精度private AudioTrack mAudioTrack;public MyAudioTrack(int frequency, int channel, int sampbit) {this.mFrequency = frequency;this.mChannel = channel;this.mSampBit = sampbit;}/*** 初始化*/public void init() {if (mAudioTrack != null) {release();}// 获得构建对象的最小缓冲区大小int minBufSize = getMinBufferSize();mAudioTrack = new AudioTrack(AudioManager.STREAM_MUSIC,mFrequency, mChannel, mSampBit, minBufSize, AudioTrack.MODE_STREAM);mAudioTrack.play();}/*** 释放资源*/public void release() {if (mAudioTrack != null) {mAudioTrack.stop();mAudioTrack.release();}}/*** 将解码后的pcm数据写入audioTrack播放** @param data   数据* @param offset 偏移* @param length 需要播放的长度*/public void playAudioTrack(byte[] data, int offset, int length) {if (data == null || data.length == 0) {return;}try {mAudioTrack.write(data, offset, length);} catch (Exception e) {Log.e("MyAudioTrack", "AudioTrack Exception : " + e.toString());}}public int getMinBufferSize() {return AudioTrack.getMinBufferSize(mFrequency,mChannel, mSampBit);}
}

这里简单介绍一下,在AudioTrack构造方法AudioTrack(int streamType, int sampleRateInHz, int channelConfig, int audioFormat, int bufferSizeInBytes, int mode)里几个变量的含义:
1.streamType:指定流的类型,主要包括以下几种:
- STREAM_ALARM:警告声
- STREAM_MUSCI:音乐声
- STREAM_RING:铃声
- STREAM_SYSTEM:系统声音
- STREAM_VOCIE_CALL:电话声音
因为android系统对不同的声音的管理是分开的,所以这个参数的作用就是设置AudioTrack播放的声音类型。

2.sampleRateInHz : 采样率

3.channelConfig : 声道

4.audioFormat : 采样精度

5.bufferSizeInBytes :缓冲区大小,可以通过AudioTrack.getMinBufferSize(int sampleRateInHz, int channelConfig, int audioFormat)来获取

6.mode : MODE_STATIC和MODE_STREAM:
- MODE_STATIC : 直接把所有的数据加载到缓存区,不需要多次write,一般用于占用内存小,延时要求高的情况
- MODE_STREAM : 需要多次write,一般用于像从网络获取数据或者实时解码的情况,本次的例子就是这种情况。

我这里只是简单的介绍,大家可以去网上找更为详细的介绍。

AAC解码器

这里主要对MediaCodec进行封装,实现一帧帧去解码AAC。

/*** Created by ZhangHao on 2017/5/17.* 用于aac音频解码*/public class AACDecoderUtil {private static final String TAG = "AACDecoderUtil";//声道数private static final int KEY_CHANNEL_COUNT = 2;//采样率private static final int KEY_SAMPLE_RATE = 48000;//用于播放解码后的pcmprivate MyAudioTrack mPlayer;//解码器private MediaCodec mDecoder;//用来记录解码失败的帧数private int count = 0;/*** 初始化所有变量*/public void start() {prepare();}/*** 初始化解码器** @return 初始化失败返回false,成功返回true*/public boolean prepare() {// 初始化AudioTrackmPlayer = new MyAudioTrack(KEY_SAMPLE_RATE, AudioFormat.CHANNEL_OUT_STEREO, AudioFormat.ENCODING_PCM_16BIT);mPlayer.init();try {//需要解码数据的类型String mine = "audio/mp4a-latm";//初始化解码器mDecoder = MediaCodec.createDecoderByType(mine);//MediaFormat用于描述音视频数据的相关参数MediaFormat mediaFormat = new MediaFormat();//数据类型mediaFormat.setString(MediaFormat.KEY_MIME, mine);//声道个数mediaFormat.setInteger(MediaFormat.KEY_CHANNEL_COUNT, KEY_CHANNEL_COUNT);//采样率mediaFormat.setInteger(MediaFormat.KEY_SAMPLE_RATE, KEY_SAMPLE_RATE);//比特率mediaFormat.setInteger(MediaFormat.KEY_BIT_RATE, 128000);//用来标记AAC是否有adts头,1->有mediaFormat.setInteger(MediaFormat.KEY_IS_ADTS, 1);//用来标记aac的类型mediaFormat.setInteger(MediaFormat.KEY_AAC_PROFILE, MediaCodecInfo.CodecProfileLevel.AACObjectLC);//ByteBuffer key(暂时不了解该参数的含义,但必须设置)byte[] data = new byte[]{(byte) 0x11, (byte) 0x90};ByteBuffer csd_0 = ByteBuffer.wrap(data);mediaFormat.setByteBuffer("csd-0", csd_0);//解码器配置mDecoder.configure(mediaFormat, null, null, 0);} catch (IOException e) {e.printStackTrace();return false;}if (mDecoder == null) {return false;}mDecoder.start();return true;}/*** aac解码+播放*/public void decode(byte[] buf, int offset, int length) {//输入ByteBufferByteBuffer[] codecInputBuffers = mDecoder.getInputBuffers();//输出ByteBufferByteBuffer[] codecOutputBuffers = mDecoder.getOutputBuffers();//等待时间,0->不等待,-1->一直等待long kTimeOutUs = 0;try {//返回一个包含有效数据的input buffer的index,-1->不存在int inputBufIndex = mDecoder.dequeueInputBuffer(kTimeOutUs);if (inputBufIndex >= 0) {//获取当前的ByteBufferByteBuffer dstBuf = codecInputBuffers[inputBufIndex];//清空ByteBufferdstBuf.clear();//填充数据dstBuf.put(buf, offset, length);//将指定index的input buffer提交给解码器mDecoder.queueInputBuffer(inputBufIndex, 0, length, 0, 0);}//编解码器缓冲区MediaCodec.BufferInfo info = new MediaCodec.BufferInfo();//返回一个output buffer的index,-1->不存在int outputBufferIndex = mDecoder.dequeueOutputBuffer(info, kTimeOutUs);if (outputBufferIndex < 0) {//记录解码失败的次数count++;}ByteBuffer outputBuffer;while (outputBufferIndex >= 0) {//获取解码后的ByteBufferoutputBuffer = codecOutputBuffers[outputBufferIndex];//用来保存解码后的数据byte[] outData = new byte[info.size];outputBuffer.get(outData);//清空缓存outputBuffer.clear();//播放解码后的数据mPlayer.playAudioTrack(outData, 0, info.size);//释放已经解码的buffermDecoder.releaseOutputBuffer(outputBufferIndex, false);//解码未解完的数据outputBufferIndex = mDecoder.dequeueOutputBuffer(info, kTimeOutUs);}} catch (Exception e) {Log.e(TAG, e.toString());e.printStackTrace();}}//返回解码失败的次数public int getCount() {return count;}/*** 释放资源*/public void stop() {try {if (mPlayer != null) {mPlayer.release();mPlayer = null;}if (mDecoder != null) {mDecoder.stop();mDecoder.release();}} catch (Exception e) {e.printStackTrace();}}
}

其实这里和我之前利用MediaCodec解码H264很类似,主要就是在因为解码数据类型不同,所以初始化时有区别。还有一点就是解码H624时,直接将解码后数据利用surface显示,而解码aac是将解码后的数据取出来,再利用AudioTrack播放。

读取aac文件

这里是利用线程读aac文件,获得一帧帧的aac帧数据,然后送入解码器播放。

/*** Created by ZhangHao on 2017/4/18.* 播放aac音频文件*/
public class ReadAACFileThread extends Thread {//音频解码器private AACDecoderUtil audioUtil;//文件路径private String filePath;//文件读取完成标识private boolean isFinish = false;//这个值用于找到第一个帧头后,继续寻找第二个帧头,如果解码失败可以尝试缩小这个值private int FRAME_MIN_LEN = 50;//一般AAC帧大小不超过200k,如果解码失败可以尝试增大这个值private static int FRAME_MAX_LEN = 100 * 1024;//根据帧率获取的解码每帧需要休眠的时间,根据实际帧率进行操作private int PRE_FRAME_TIME = 1000 / 50;//记录获取的帧数private int count = 0;public ReadAACFileThread(String path) {this.audioUtil = new AACDecoderUtil();this.filePath = path;this.audioUtil.start();}@Overridepublic void run() {super.run();File file = new File(filePath);//判断文件是否存在if (file.exists()) {try {FileInputStream fis = new FileInputStream(file);//保存完整数据帧byte[] frame = new byte[FRAME_MAX_LEN];//当前帧长度int frameLen = 0;//每次从文件读取的数据byte[] readData = new byte[10 * 1024];//开始时间long startTime = System.currentTimeMillis();//循环读取数据while (!isFinish) {if (fis.available() > 0) {int readLen = fis.read(readData);//当前长度小于最大值if (frameLen + readLen < FRAME_MAX_LEN) {//将readData拷贝到frameSystem.arraycopy(readData, 0, frame, frameLen, readLen);//修改frameLenframeLen += readLen;//寻找第一个帧头int headFirstIndex = findHead(frame, 0, frameLen);while (headFirstIndex >= 0 && isHead(frame, headFirstIndex)) {//寻找第二个帧头int headSecondIndex = findHead(frame, headFirstIndex + FRAME_MIN_LEN, frameLen);//如果第二个帧头存在,则两个帧头之间的就是一帧完整的数据if (headSecondIndex > 0 && isHead(frame, headSecondIndex)) {//视频解码count++;Log.e("ReadAACFileThread", "Length : " + (headSecondIndex - headFirstIndex));audioUtil.decode(frame, headFirstIndex, headSecondIndex - headFirstIndex);//截取headSecondIndex之后到frame的有效数据,并放到frame最前面byte[] temp = Arrays.copyOfRange(frame, headSecondIndex, frameLen);System.arraycopy(temp, 0, frame, 0, temp.length);//修改frameLen的值frameLen = temp.length;//线程休眠sleepThread(startTime, System.currentTimeMillis());//重置开始时间startTime = System.currentTimeMillis();//继续寻找数据帧headFirstIndex = findHead(frame, 0, frameLen);} else {//找不到第二个帧头headFirstIndex = -1;}}} else {//如果长度超过最大值,frameLen置0frameLen = 0;}} else {//文件读取结束isFinish = true;}}} catch (Exception e) {e.printStackTrace();}Log.e("ReadAACFileThread", "AllCount:" + count + "Error Count : " + audioUtil.getCount());} else {Log.e("ReadH264FileThread", "File not found");}audioUtil.stop();}/*** 寻找指定buffer中AAC帧头的开始位置** @param startIndex 开始的位置* @param data       数据* @param max        需要检测的最大值* @return*/private int findHead(byte[] data, int startIndex, int max) {int i;for (i = startIndex; i <= max; i++) {//发现帧头if (isHead(data, i))break;}//检测到最大值,未发现帧头if (i == max) {i = -1;}return i;}/*** 判断aac帧头*/private boolean isHead(byte[] data, int offset) {boolean result = false;if (data[offset] == (byte) 0xFF && data[offset + 1] == (byte) 0xF1&& data[offset + 3] == (byte) 0x80) {result = true;}return result;}//修眠private void sleepThread(long startTime, long endTime) {//根据读文件和解码耗时,计算需要休眠的时间long time = PRE_FRAME_TIME - (endTime - startTime);if (time > 0) {try {Thread.sleep(time);} catch (InterruptedException e) {e.printStackTrace();}}}
}

这里没有太多的东西,就是通过帧头来判断aac帧,并截取每帧数据送入解码器。我这里只是取巧做了简单的判断,对帧头的判断并不一定满足所有的aac帧头,大家可以根据实际的情况自行修改。

结语

1.其实,实现分离音频帧,利用MediaExtractor这个类就可以实现,但是因为我实际的数据源是来自网络,所以才会demo才会复杂一点。
2.H264,AAC解码Demo下载地址:http://download.csdn.net/detail/a512337862/9882200 。附带aac以及H264文件以及源码

Android MediaCodec硬解码AAC音频文件(实时AAC音频帧)并播放相关推荐

  1. Android MediaCodec硬解码AAC音频文件并播放

    在这里简单介绍一下,如何利用Android MediaCodec解码AAC音频文件或者实时AAC音频帧并通过AudioTrack来播放.主要的思路就是从文件或者网络获取一帧帧的AAC的数据,送入解码器 ...

  2. Android使用MediaCodec硬解码播放H264格式视频文件

    前些时间,通过各种搜索加请教了好几个同行的朋友,在他们的指点下实现: RTSP+H264实时视频播放播放及把实时视频流保存到手机SD卡中,再对保存的H264格式文件进行播放等基本功能.非常感谢这些朋友 ...

  3. MediaCodec在Android视频硬解码组件的应用

    https://yq.aliyun.com/articles/632892 云栖社区> 博客列表> 正文 MediaCodec在Android视频硬解码组件的应用 cheenc 2018- ...

  4. 剪切音频文件是处理音频数据

    剪切音频文件是处理音频数据的最基本功能之一 pydub库使之变得超级简单.就像关于裁剪和调整图片的那篇文章一样,这个程序能够进入一级Python类别的唯一原因是使用了一个外部库. 在这篇文章中,我们将 ...

  5. 使用MediaCodec硬解码h.265视频及音频进行播放

    h.265这个视频是很多播放器不支持的,就算是bilibili开源的ijkplayer也不能直接播放,需要自己去重新编译 才可以支持. 这里通过这个demo来演示一下如何硬解码视频,播放h.265视频 ...

  6. Android MediaCodec硬编码H264文件(四)

    在 Android 4.1 版本提供了 MediaCodec 接口来访问设备的编解码器,不同于 FFmpeg 的软件编解码,它采用的是硬件编解码能力,因此在速度上会比软解更具有优势,但是由于 Andr ...

  7. Android判断是否使用MediaCodec硬解码(十二)

    0.Android硬编解码测试程序: cts/tests/tests/media/src/android/media/cts/EncodeDecodeTest.java1.调用硬编解码 framewo ...

  8. OpenGL ES:配合MediaCodec硬解码渲染(视频加滤镜播放)

    注意点: MediaCodec 解码后的原始数据,格式为yuv,而OpenGL所能渲染的格式为rgb,因此我们需要使用扩展库中的扩展纹理 GLES11Ext.GL_TEXTURE_EXTERNAL_O ...

  9. Android MediaCodec硬件解码视频播放

    1.MediaCodec 是什么 MediaCodec类可以访问底层媒体编解码器框架(StageFright 或 OpenMAX),即编解码组件.是Android 的低层多媒体基础设施的一部分(通常与 ...

最新文章

  1. 5分钟带你读「大清」微积分!160多年前清朝数学家撰写文言文版高等数学
  2. 华硕p8b75v主板说明书_主板如何接线
  3. Spring核心技术原理-(1)-通过Web开发演进过程了解一下为什么要有Spring?
  4. mysql002创建表
  5. OC-NSFileManager和NSFileHandle的使用
  6. 经典编程问题之:选择排序、冒泡排序、汉诺塔游戏,均用js代码实现
  7. 201521123050 《Java程序设计》第8周学习总结
  8. java when for where_JAVA_EE_MyBatis之动态SQL
  9. java 8中排序_如何在JAVA 8中一起使用分组和排序
  10. Python项目开发公用方法--excel生成方法
  11. python31001python3_Python310第二个alpha版本最新特性值得关注Python 3100a0 文档
  12. mysql没有卸载干净服务还启动着,MySQL卸载不干净,真的让人很头大
  13. 简单将xml数据转换为txt数据
  14. 2021最新 上海互联网公司排名
  15. 数三退一问题||拉手成圈出圈问题
  16. 如何查看电脑能否加内存条
  17. 打包 压缩 解压缩命令
  18. 32 --> 详解 OpenWRT系统框架基础软件模块之netifd
  19. 四个步骤教你写好一款产品的运营数据分析报告(转)
  20. Scoop包管理工具

热门文章

  1. linux下 批量替换文件内容
  2. 高清HDMI转3G SDI方案介绍
  3. iOS自定义tabBar
  4. SystemUI深度裁剪
  5. java filenotfoundexception类_java.io.FileNotFoundException:没有此类文件或目录错误
  6. mysql ini配置文件分组排序_Windows下的mysql获取my.ini配置文件位置的顺序
  7. HTTPS 的加密过程
  8. http、https加密过程
  9. 걸까비동기를걸까걸까?
  10. 弹性地基梁板法计算原理_一种筏板基础内力分析方法与流程