###前言 #####基于Android NDK开发之旅30--FFmpeg视频播放这篇文章,我们已经学会视频解码基本过程。这篇文章就对音频解码进行分析。 #####音频解码和视频解码的套路基本是一样的, 否则怎么会做到音视频同步播放呢?

###1.FFmpeg音视解码过程分析 参考视频解码过程,得到音频解码过程 ![参考视频解码过程](http://upload-images.jianshu.io/upload_images/1824809-79b9f19d44b14f2c.png?imageMogr2/auto-orient/strip%7CimageView2/2/w/1240) ####1.1.注册所有组件 ``` av_register_all(); ``` 这个函数,可以注册所有支持的容器和对应的codec。 ####1.2.打开输入音频文件 ``` AVFormatContext *pFormatCtx = avformat_alloc_context(); avformat_open_input(&pFormatCtx, input_cstr, NULL, NULL) ``` ####1.3.获取音频文件信息 ``` avformat_find_stream_info(pFormatCtx, NULL) ``` ``` //获取音频流索引位置 int i = 0, audio_stream_idx = -1; for (; i < pFormatCtx->nb_streams; i++) { if (pFormatCtx->streams[i]->codec->codec_type == AVMEDIA_TYPE_AUDIO) { audio_stream_idx = i; break; } } if (audio_stream_idx == -1) { LOGI("%s", "找不到音频流"); return; } ```

####1.4.根据编解码上下文中的编码id查找对应的解码器

 //获取解码器AVCodecContext *pCodeCtx = pFormatCtx->streams[audio_stream_idx]->codec;AVCodec *codec = avcodec_find_decoder(pCodeCtx->codec_id);
复制代码

####1.5.打开解码器

avcodec_open2(pCodeCtx, codec, NULL)
复制代码

来打开解码器,AVFormatContext、AVStream、AVCodecContext、AVCodec四者之间的关系为

####1.6.配置音频参数

  //输入采样率格式enum AVSampleFormat in_sample_fmt = pCodeCtx->sample_fmt;//输出采样率格式16bit PCMenum AVSampleFormat out_sample_fmt = AV_SAMPLE_FMT_S16;//输入采样率int in_sample_rate = pCodeCtx->sample_rate;//输出采样率int out_sample_rate = 44100;//获取输入的声道布局//根据声道个数获取默认的声道布局(2个声道,默认立体声)//av_get_default_channel_layout(pCodeCtx->channels);uint64_t in_ch_layout = pCodeCtx->channel_layout;//输出的声道布局uint64_t out_ch_layout = AV_CH_LAYOUT_STEREO;swr_alloc_set_opts(swrCtx, out_ch_layout, out_sample_fmt, out_sample_rate, in_ch_layout, in_sample_fmt, in_sample_rate, 0, NULL);swr_init(swrCtx);
复制代码

####1.7. 一帧一帧读取压缩的音频数据AVPacket

while (av_read_frame(pFormatCtx, packet) >= 0) {
省略...
}
复制代码

####1.8.解码一帧音频数据AVPacket->AVFrame

avcodec_decode_video2(pCodecCtx, pFrame, &got_picture, packet)
复制代码

###2.关键代码 #####VideoUtils.class

package com.haocai.ffmpegtest;public class VideoUtils {//音频解码public native void audioDecode(String input,String output);static{System.loadLibrary("avutil-54");System.loadLibrary("swresample-1");System.loadLibrary("avcodec-56");System.loadLibrary("avformat-56");System.loadLibrary("swscale-3");System.loadLibrary("postproc-53");System.loadLibrary("avfilter-5");System.loadLibrary("avdevice-56");System.loadLibrary("myffmpeg");}
}复制代码

#####MainActivity.class

    /*** 音频解码*/public void doAudioDecode(){String input = new File(Environment.getExternalStorageDirectory(),"说散就散.mp3").getAbsolutePath();String output = new File(Environment.getExternalStorageDirectory(),"说散就散.pcm").getAbsolutePath();VideoUtils player = new VideoUtils();player.audioDecode(input, output);Toast.makeText(this,"正在解码...",Toast.LENGTH_SHORT).show();}
复制代码

#####ffmpeg_voicer.c

#include <com_haocai_ffmpegtest_VideoUtils.h>
#include <android/log.h>
#include <android/native_window_jni.h>
#include <android/native_window.h>
#include <stdio.h>
//解码
#include "include/libavcodec/avcodec.h"
//封装格式处理
#include "include/libavformat/avformat.h"
//像素处理
#include "include/libswscale/swscale.h"
//重采样
#include "include/libswresample/swresample.h"#define  LOG_TAG    "ffmpegandroidplayer"
#define  LOGI(FORMAT,...) __android_log_print(ANDROID_LOG_INFO,LOG_TAG,FORMAT,##__VA_ARGS__);
#define  LOGE(FORMAT,...) __android_log_print(ANDROID_LOG_ERROR,LOG_TAG,FORMAT,##__VA_ARGS__);
#define  LOGD(FORMAT,...)  __android_log_print(ANDROID_LOG_DEBUG, LOG_TAG,FORMAT, ##__VA_ARGS__)//音频解码 采样率 新版版可达48000 * 4
#define MAX_AUDIO_FRME_SIZE  2 * 44100//音频解码
JNIEXPORT void JNICALL Java_com_haocai_ffmpegtest_VideoUtils_audioDecode
(JNIEnv *env, jobject jobj, jstring input_jstr, jstring output_jstr) {const char* input_cstr = (*env)->GetStringUTFChars(env, input_jstr, NULL);const char* output_cstr = (*env)->GetStringUTFChars(env, output_jstr, NULL);LOGI("%s", "init");//注册组件av_register_all();AVFormatContext *pFormatCtx = avformat_alloc_context();//打开音频文件if (avformat_open_input(&pFormatCtx, input_cstr, NULL, NULL) != 0) {LOGI("%s", "无法打开音频文件");return;}//获取输入文件信息if (avformat_find_stream_info(pFormatCtx, NULL) < 0) {LOGI("%s", "无法获取输入文件信息");return;}//获取音频流索引位置int i = 0, audio_stream_idx = -1;for (; i < pFormatCtx->nb_streams; i++) {if (pFormatCtx->streams[i]->codec->codec_type == AVMEDIA_TYPE_AUDIO) {audio_stream_idx = i;break;}}if (audio_stream_idx == -1){LOGI("%s", "找不到音频流");return;}//获取解码器AVCodecContext *pCodeCtx = pFormatCtx->streams[audio_stream_idx]->codec;AVCodec *codec = avcodec_find_decoder(pCodeCtx->codec_id);if (codec == NULL) {LOGI("%s", "无法获取加码器");return;}//打开解码器if (avcodec_open2(pCodeCtx, codec, NULL) < 0) {LOGI("%s", "无法打开解码器");return;}//压缩数据AVPacket *packet = (AVPacket *)av_malloc(sizeof(AVPacket));//解压缩数据AVFrame *frame = av_frame_alloc();//frame->16bit  44100 PCM 统一音频采样格式与采样率SwrContext *swrCtx = swr_alloc();//重采样设置参数--------------start//输入采样率格式enum AVSampleFormat in_sample_fmt = pCodeCtx->sample_fmt;//输出采样率格式16bit PCMenum AVSampleFormat out_sample_fmt = AV_SAMPLE_FMT_S16;//输入采样率int in_sample_rate = pCodeCtx->sample_rate;//输出采样率int out_sample_rate = 44100;//获取输入的声道布局//根据声道个数获取默认的声道布局(2个声道,默认立体声)//av_get_default_channel_layout(pCodeCtx->channels);uint64_t in_ch_layout = pCodeCtx->channel_layout;//输出的声道布局uint64_t out_ch_layout = AV_CH_LAYOUT_STEREO;swr_alloc_set_opts(swrCtx, out_ch_layout, out_sample_fmt, out_sample_rate, in_ch_layout, in_sample_fmt, in_sample_rate, 0, NULL);swr_init(swrCtx);//获取输入输出的声道个数int out_channel_nb = av_get_channel_layout_nb_channels(out_ch_layout);LOGI("out_count:%d", out_channel_nb);//重采样设置参数--------------end//16bit 44100 PCM 数据uint8_t *out_buffer = (uint8_t *)av_malloc(MAX_AUDIO_FRME_SIZE);FILE *fp_pcm = fopen(output_cstr, "wb");int got_frame = 0, framecount = 0, ret;//6.一帧一帧读取压缩的音频数据AVPacketwhile (av_read_frame(pFormatCtx, packet) >= 0) {if (packet->stream_index == audio_stream_idx) {//解码ret = avcodec_decode_audio4(pCodeCtx, frame, &got_frame, packet);if (ret < 0) {LOGI("%s", "解码完成");break;}//非0,正在解码if (got_frame > 0) {LOGI("解码:%d", framecount++);swr_convert(swrCtx, &out_buffer, MAX_AUDIO_FRME_SIZE, frame->data, frame->nb_samples);//获取sample的sizeint out_buffer_size = av_samples_get_buffer_size(NULL, out_channel_nb, frame->nb_samples, out_sample_fmt, 1);fwrite(out_buffer, 1, out_buffer_size, fp_pcm);}}av_free_packet(packet);}fclose(fp_pcm);av_frame_free(&frame);av_free(out_buffer);swr_free(&swrCtx);avcodec_close(pCodeCtx);avformat_close_input(&pFormatCtx);(*env)->ReleaseStringUTFChars(env, input_jstr, input_cstr);(*env)->ReleaseStringUTFChars(env, output_jstr, output_cstr);}
复制代码

######说明:其它视频格式也支持

###3.输出结果 ####3.1Log输出

12-12 14:23:40.733 15985-15985/com.haocai.ffmpegtest I/ffmpegandroidplayer: init
12-12 14:23:40.803 15985-15985/com.haocai.ffmpegtest I/ffmpegandroidplayer: out_count:2
12-12 14:23:40.843 15985-15985/com.haocai.ffmpegtest I/ffmpegandroidplayer: 解码:0
12-12 14:23:40.843 15985-15985/com.haocai.ffmpegtest I/ffmpegandroidplayer: 解码:1
12-12 14:23:40.843 15985-15985/com.haocai.ffmpegtest I/ffmpegandroidplayer: 解码:2
复制代码

####3.1.mp3格式解码生成.pcm格式数据

###源码下载 #####Github:github.com/kpioneer123…

###特别感谢: CrazyDiode

Android NDK开发之旅31 FFmpeg音频解码相关推荐

  1. Android NDK开发之旅29 云服务器Ubuntu下搭建NDK环境,并编译FFmpeg

    ###前言 因为在Linux环境下编译FFmpeg生成库和头文件下比较方便,所以接下来主要操作在Linux环境下进行.但是对于Android NDK 开发新手来说,自己电脑配置Ubuntu Linux ...

  2. Android NDK开发之旅34 NDK 手把手带你入门直播技术

    ####前言 先来了解一下视频直播的基本架构: 我们需要有一个主播客户端进行音视频采集,压缩,然后通过RTMP协议进行推流,推到流媒体服务器,然后其他客户端统一从流媒体服务器引流,播放.关于这里的过程 ...

  3. Android NDK开发之旅1 NDK介绍

    ###一.NDK产生的背景 Android平台从诞生起,就已经支持C.C++开发.众所周知,Android的SDK基于Java实现,这意味着基于Android SDK进行开发的第三方应用都必须使用Ja ...

  4. Android NDK开发之旅25 NDK 模仿QQ变声特效

    ###前言 我们这次用到的是fmod这个库,fmod是音效引擎游戏开发革命引擎,著名的游戏开发引擎CosCos2D.U3D都封装了这个库. 学习NDK的目的就是为了让我们的APP能够使用C/C++开源 ...

  5. java 与jni转码,Android NDK开发之旅37--FFmpeg转码压缩

    前言 Windows下命令行转码压缩形式 ffmpeg -i input.mov -b:v 640k output.mp4 Android也是利用FFmpeg命令行的形式(混编),进行视频转码压缩. ...

  6. Android NDK开发之旅14 JNI 缓存策略

    ###缓存策略 有两种: ####一.使用局部的static变量: JNIEXPORT void JNICALL Java_com_test_JniTest_cache (JNIEnv * env, ...

  7. Android NDK开发之 NEON基础介绍

    原文:http://blog.csdn.net/app_12062011/article/details/50434259 Android NDK开发之 NEON基础介绍 这是官方介绍: http:/ ...

  8. Android NDK开发之 NEON使用介绍

    首先找到了要在C源代码中只用NEON库需要的头文件 arm_neon.h. #include <arm_neon.h> //在代码中先添加了这行语句,然后执行ndk-build 却提示了错 ...

  9. android ndk neon,Android NDK开发之 NEON使用介绍

    首先找到了要在C源代码中只用NEON库需要的头文件 arm_neon.h. #include //在代码中先添加了这行语句,然后执行ndk-build 却提示了错误 //提示要增加什么标志,自己在 L ...

最新文章

  1. Unity 2021创建2D休闲点击器游戏视频教程
  2. java threas.jion_Java Thread.join详解
  3. LeetCode-二分查找-35. 搜索插入位置
  4. 2021-10-16 集合(set)与映射(map) 恋上数据结构笔记
  5. PAT (Basic Level) Practice (中文)1009 说反话 (20 分)
  6. mysql可以运行在不同sql mode模式下面,sql mode模式定义了mysql应该支持的sql语法,数据校验等...
  7. AlarmManager机制和系统唤醒锁的总结
  8. c++ qt5范例开发大全_使用yocto工具编译qt5.9.6总结
  9. 让Jackson JSON生成的数据包含的中文以unicode方式编码
  10. ARToolkit介绍
  11. MySQL MYISAM引擎表锁和行锁详解
  12. docker代理配置详解
  13. 慕课 springmvc 起步 maven wbe
  14. sql server 2005 T-SQL ALTER SCHEMA (Transact-SQL)
  15. Richpedia: A Large-Scale, Comprehensive Multi-Modal Knowledge Graph
  16. 2021年的放假安排正式官宣!五一连休5天哦!
  17. IO---缓冲流、字符集、转换流、序列化和反序列化
  18. 2019第三季度UWA STAR:解答亦是学习
  19. php 漏洞 怎么解决,php安全漏洞怎么修复?
  20. windows和linux环境下的嵌入式开发区别

热门文章

  1. 搭建Mantis 缺陷管理系统(转)
  2. 常用的css3的新属性
  3. 基于Idea从零搭建一个最简单的vue项目
  4. 小程序这件事 撸起袖子加油干
  5. springboot 整合redis 实现KeySpaceNotification 键空间通知
  6. Linux硬盘性能测试工具 - FIO
  7. Node.js与Sails~方法拦截器policies
  8. No modifications are allowed to a locked ParameterMap
  9. [原创]Java性能优化权威指南读书思维导图
  10. 职场观察:高薪需要什么?