NDK学习笔记:JNI调用Java层方法创建Native的AudioTrack播放PCM

题目有点复杂,不过确实就是那么回事。这章想记录的内容比较多,先列出来:

  1. native static 与 native的参数列表 区别
  2. JNI 调用 Java的方法(相关API、方法签名的获取)
  3. native使用java对象 常用实用技巧。

废话不说,直接撸码

public class ZzrFFPlayer {public native int playMusic(String media_input_str);/*** 创建一个AudioTrac对象,用于播放* @param sampleRateInHz 采样率* @param nb_channels 声道数* @return AudioTrack_obj* // 使用流程* AudioTrack audioTrack = new AudioTrack* audioTrack.play();* audioTrack.write(audioData, offsetInBytes, sizeInBytes);*/public AudioTrack createAudioTrack(int sampleRateInHz, int nb_channels){//固定格式的音频码流int audioFormat = AudioFormat.ENCODING_PCM_16BIT;//声道布局int channelConfig;if(nb_channels == 1){channelConfig = android.media.AudioFormat.CHANNEL_OUT_MONO;} else {channelConfig = android.media.AudioFormat.CHANNEL_OUT_STEREO;}int bufferSizeInBytes = AudioTrack.getMinBufferSize(sampleRateInHz, channelConfig, audioFormat);AudioTrack audioTrack = new AudioTrack(AudioManager.STREAM_MUSIC,sampleRateInHz, channelConfig,audioFormat,bufferSizeInBytes, AudioTrack.MODE_STREAM);return audioTrack;}// ...
}

我们在ZzrFFPlayer新建两个函数,native的playMusic 和 java方法createAudioTrack。用于创建AudioTrack对象。注意native方法不带static,是一个成员方法。

audio_track_fields audioTrackCtx; // 自定义全局变量JNIEXPORT jint JNICALL
Java_org_zzrblog_mp_ZzrFFPlayer_playMusic(JNIEnv *env, jobject instance, jstring media_input_jstr)
{// 模板代码,参考上篇文章内容// ... ...//16bit 44100 PCM 数据的实际内存空间。uint8_t *out_buffer = (uint8_t *)av_malloc(MAX_AUDIO_FARME_SIZE);//根据声道布局 获取 输出的声道个数int out_channel_nb = av_get_channel_layout_nb_channels(out_ch_layout);// 调用java创建AudioTrackcreateAudioTrackContext(env, instance, out_sample_rate, out_channel_nb);// AudioTrack.play(*env)->CallVoidMethod(env, audioTrackCtx.audio_track, audioTrackCtx.audio_track_play_mid);int ret;while(av_read_frame(pFormatContext, packet) >= 0){if(packet->stream_index == audio_stream_idx){ret = avcodec_send_packet(pCodecContext, packet);if(ret < 0) {LOGE("avcodec_send_packet:%d\n", ret);continue;}while(ret >= 0) {ret = avcodec_receive_frame(pCodecContext, frame);if (ret == AVERROR(EAGAIN) || ret == AVERROR_EOF) {LOGD("avcodec_receive_frame:%d\n", ret);break;} else if (ret < 0) {LOGW("avcodec_receive_frame:%d\n", AVERROR(ret));goto end;  //end处进行资源释放等善后处理}if (ret >= 0){swr_convert(swrCtx, &out_buffer, MAX_AUDIO_FARME_SIZE, (const uint8_t **) frame->data, frame->nb_samples);//获取sample的sizeint out_buffer_size = av_samples_get_buffer_size(NULL, out_channel_nb,frame->nb_samples, out_sample_fmt, 1);// 进入Android.AudioTrack播放PCM的流程//AudioTrack.write(byte[] int int) //需要byte数组,把out_buffer缓冲区数据转成byte数组,对应jni的jbyteArray jbyteArray audio_data_byteArray = (*env)->NewByteArray(env, out_buffer_size);jbyte* fp_AudioDataArray = (*env)->GetByteArrayElements(env, audio_data_byteArray, NULL);memcpy(fp_AudioDataArray, out_buffer, (size_t) out_buffer_size);(*env)->ReleaseByteArrayElements(env, audio_data_byteArray, fp_AudioDataArray,0);// AudioTrack.write PCM数据(*env)->CallIntMethod(env,audioTrackCtx.audio_track,audioTrackCtx.audio_track_write_mid,audio_data_byteArray, 0, out_buffer_size);//!!!释放局部引用,要不然会局部引用溢出(*env)->DeleteLocalRef(env,audio_data_byteArray);usleep(1000 * 16);}}}av_packet_unref(packet);}LOGD("媒体文件.PCM结束\n");// ... ...
}

playMusic的实现与上篇文章内容一样,我们直接到关键部分。

首先回答第一个问题:native static 与 native的参数列表区别就在于jni传入的第二个参数。static代表的是类方法,所以第二个参数传入的 jclass 类型的,是说明调用 此方法的类 类型。对应java的 java.lang.Class ;  而非static方法就是传统的成员方法,第二个传入的参数是jobject,代表的是当前调用的对象。 我们通过jobject 通过API 获取 jclass。

接下来我们开始分析第二个关键点:JNI 调用 Java的方法生成java对象。


typedef struct {jobject    audio_track;jmethodID   audio_track_play_mid;jmethodID   audio_track_write_mid;
} audio_track_fields;audio_track_fields audioTrackCtx;int createAudioTrackContext(JNIEnv *env, jobject instance, int out_sample_rate, int out_channel_nb)
{jclass player_class = (*env)->GetObjectClass(env, instance);//java.AudioTrack对象jmethodID create_audio_track_mid = (*env)->GetMethodID(env,player_class,"createAudioTrack","(II)Landroid/media/AudioTrack;");jobject audio_track = (*env)->CallObjectMethod(env, instance, create_audio_track_mid, out_sample_rate, out_channel_nb);if(audio_track!=NULL) {audioTrackCtx.audio_track = audio_track;} else {return -1;}//java.AudioTrack.play方法jclass audio_track_class = (*env)->GetObjectClass(env,audio_track);jmethodID audio_track_play_mid = (*env)->GetMethodID(env,audio_track_class,"play","()V");//(*env)->CallVoidMethod(env,audio_track,audio_track_play_mid);if(audio_track_play_mid!=NULL) {audioTrackCtx.audio_track_play_mid = audio_track_play_mid;} else {return -2;}//java.AudioTrack.write方法jmethodID audio_track_write_mid = (*env)->GetMethodID(env,audio_track_class,"write","([BII)I");//(*env)->CallIntMethod(env,audio_track,audio_track_write_mid, audioData, offsetInBytes, sizeInBytes);if(audio_track_write_mid!=NULL) {audioTrackCtx.audio_track_write_mid = audio_track_write_mid;} else {return -3;}return 0;
}

很多传统的Java程序员,即使他们懂C++,可能都会对JNI这个中间人充满恐惧,感觉无法掌握NDK开发的正确姿势。回归正题,JNI 调用 Java的方法其实并不难,需要把握以下几个关键点:

1、搞清楚持有者的类型。即jclass,或者是从 jobject 得到 jclass。这一点不难理解。对象.方法,有了对象才有方法。

2、找到调用的方法。这一步可能就让很多人懵逼了。方法还需要找?一个点,编译器就会给出提示了啊。AS针对Android的开发者为了提高效率,它已经提前帮大家找全并全部展示给开发者。在NDK的开发中我们要怎么去找到方法呢?根据方法的名字和参数列表的签名。方法名字很好理解,那么这里的签名要怎么搞了。通过上方的实例代码,大家可能很难理解,所以我们需要结合下方表格。

数据类型 签名字符 特殊说明
void V 一般用于表示方法的返回值
boolean Z  
byte B  
char C  
short S  
int I  
long J  
float F  
double D  
数组 [ 以[开头,几个[表示几维数组,配合其他签名字符,表示对应数据类型的数组,例如byte数组 => [B
对象引用类型 L全类名; 以L开头、;结尾,中间是引用类型的全类名

亦可以使用javasdk的命令
1、javap -s packagename.classname 
2、javap -s -p packagename.classname 
-s表示打印签名信息 
-p表示打印所有函数和成员的签名信息,默认只打印public的签名信息。

上述两条命令需要在class文件的目录下执行。如在AS中就需要先进入app\build\intermediates\classes\{buildTypes}(如:debug、release等)

先看几个简单的例子模拟方法签名:

public void test1(){}                    ()V
public void test2(String str)       (Ljava/lang/String;)V
public String str test3(String str){}      (Ljava/lang/String;)Ljava/lang/String;

在回头看看我们自己写的java方法 AudioTrack createAudioTrack(int sampleRateInHz, int nb_channels);参数两个int,返回的是Andoird系统定义的AudioTrack,所以我们先写两个参数  (II)   然后紧接着就是返回值的签名 Landroid/media/AudioTrack;  最终得出完整的签名 =>    (II)Landroid/media/AudioTrack;

搞清楚签名之后我们调用GetMethodID( JNIEnv*, jclass, const char*, const char* )从 对象的类 中获取到对应方法的 方法ID。

有方法ID之后,我们就可以针对某个对象调用其方法了,借助Call<type>Method(JNIEnv*, jobject, jmethodID, ...); 系列的API。其中的<type>就是返回的类型,当返回是void的时候对应CallVoidMethod,返回是int的时候对应CallIntMethod,这里我们返回的是AudioTrack是一个对象,所以对应调用的是CallObjectMethod。 至此我们就得到了JNI中使用的AudioTrack对象。

但是在实际开发中,经常会用一个结构体代表一组与类对象相关连的方法签名,如下所示:

typedef struct {jobject    audio_track;jmethodID   audio_track_play_mid;jmethodID   audio_track_write_mid;
} audio_track_fields;audio_track_fields audioTrackCtx;

在这里因为play方法和write方法都是在其他地方调用的,所以暂时把方法签名缓存到结构体当中。

既然获取到了AudioTrack这个jobject了,就可以去播放PCM的音频数据了。我们直接到解码的while内部的代码:

if (ret >= 0)
{swr_convert(swrCtx, &out_buffer, MAX_AUDIO_FARME_SIZE, (const uint8_t **) frame->data, frame->nb_samples);//获取sample的sizeint out_buffer_size = av_samples_get_buffer_size(NULL, out_channel_nb,frame->nb_samples, out_sample_fmt, 1);//AudioTrack.write(byte[] int int) 需要byte数组,对应jni的jbyteArray//需要把out_buffer缓冲区数据转成byte数组jbyteArray audio_data_byteArray = (*env)->NewByteArray(env, out_buffer_size);jbyte* fp_AudioDataArray = (*env)->GetByteArrayElements(env, audio_data_byteArray, NULL);memcpy(fp_AudioDataArray, out_buffer, (size_t) out_buffer_size);(*env)->ReleaseByteArrayElements(env, audio_data_byteArray, fp_AudioDataArray,0);// AudioTrack.write PCM数据(*env)->CallIntMethod(env,audioTrackCtx.audio_track,audioTrackCtx.audio_track_write_mid,audio_data_byteArray, 0, out_buffer_size);//!!!释放局部引用,要不然会局部引用溢出(*env)->DeleteLocalRef(env,audio_data_byteArray);usleep(1000 * 16);
}

明显这个while内部就是调用AudioTrack.write(byte[] int int)的地方,我们一个个把所需的参数找出来。第一个参数是pcm的byte[]数组,第二个参数是数组首地址的偏移,第三个是数组大小。

byte数组对应jni的jbyteArray,然后解码得出的pcm数据在out_buffer缓冲区,我们需要把out_buffer缓冲区数据转成byte数组。怎么做?首先肯定是要new一个jbyteArray(NewByteArray),然后获取jbyteArray这个对象的首地址jbyte*(GetByteArrayElements),然后利用标准c函数memcpy把out_buffer开始的out_buffer_size大小的内存数据 拷贝 到jbyte*首地址所指向的内存区(jbyteArray),复制了还没完工,需要调用ReleaseByteArrayElements告诉jbyteArray对象已经对首地址操作完毕了,赶紧同步一下数据。

现在我们可以调用AudioTrack.write写入PCM数据(*env)->CallIntMethod(env,audioTrackCtx.audio_track,audioTrackCtx.audio_track_write_mid, audio_data_byteArray, 0, out_buffer_size);  注意AudioTrack.write是有返回值int的。然后CallIntMethod(env,jobject,methorid,...)前三个固定值之后就是传入可变参数列表,这个列表就是对应write的(byte[] int int)的三个参数。

还没完!JNI 是属于NDK的一部分,NDK的内存是不归GC管理的。所以NewByteArray出来的jbyteArray要记得DeleteLocalRef,要不然就会出现(local reference overflow)局部引用溢出。

项目github地址:https://github.com/MrZhaozhirong/BlogApp

NDK学习笔记:JNI调用Java层方法创建Native的AudioTrack播放PCM(方法签名,CallXXXMethod)相关推荐

  1. NDK学习笔记-JNI的引用

    JNI中的引用意在告知虚拟机何时回收一个JNI变量 JNI引用变量分为局部引用和全局引用 局部引用 局部引用,通过DeletLocalRef手动释放对象 原因 访问一个很大的Java对象,使用之后还用 ...

  2. android jni 调用java对象_Android NDK开发之Jni调用Java对象

    本地代码中使用Java对象 通过使用合适的JNI函数,你可以创建Java对象,get.set 静态(static)和 实例(instance)的域,调用静态(static)和实例(instance)函 ...

  3. NDK学习笔记(十四) 使用AVILib+window创建一个AVI视频播放器

    文章目录 1.window api 2.主要代码 3.实现效果 1.window api (1)从surface对象中检索原生window 从surface中检索对象window ANativeWin ...

  4. Android-jni(10)-jni调用java父类方法

    jni调用java父类方法,在知道这个之后,我感觉jni能做的事真是厉害.我们一起来看看它与java的不同 一. jni调用java父类方法 先做个准备: 准备一个Java父类和子类,People和B ...

  5. NDK学习笔记:一起来变萝莉音!FMOD学习总结(下)

    NDK学习笔记:一起来变萝莉音!FMOD学习总结(下) 一.创建自己的变音demo 上一节我已经能够在AndroidStudio上跑起了fmod的基础教程.还有疑问的同学可以重新阅读跟着来跑一次.这章 ...

  6. Android NDK学习笔记6:异常处理

    转载请标明出处:http://blog.csdn.net/zhaoyanjun6/article/details/119547007 本文出自[赵彦军的博客] 文章目录 JNI捕获异常 JNI抛出异常 ...

  7. jni 调用java接口_JNI 调用 JAVA 接口

    JNI 调用 JAVA 接口 介绍 JNI 是本地语言编程接口.它允许运行在JVM中的Java代码和用C.C++或汇编写的本地代码相互操作. 由于一些加密等情况的需要,需要在 so 层获取一些信息用于 ...

  8. android jni 调用java_Android JNI开发系列(九)JNI调用Java的静态方法实例方法

    JNI调用Java的静态方法&实例方法 package org.professor.jni.bean; import android.util.Log; /** * Created by pe ...

  9. jni调用java数组导致VM aborting,安卓程序莫名闪退

    如果你的程序使用了如下的场景: jint JNICALL Java_Test_WriteRCArray( JNIEnv *env, jobject obj, jintArray buf) {  jin ...

最新文章

  1. 为什么要打jar_生活在西北的兰州人过春节为什么要打太平鼓?
  2. 某office前台任意文件上传漏洞分析
  3. Kafka分区分配策略(Partition Assignment Strategy)
  4. java彩色的世界_JAVA真彩色转256色的实现
  5. 王荣刚:视频画质评定是个“大坑”
  6. pcb板子开窗_PCB 层定义
  7. 使用find 命令执行命令 -exec
  8. 少走弯路,给3~5年程序员的唯一一条建议
  9. android 手写签批_Android手写签名效果
  10. 一个带CheckBox的树形目录的递归算法(javascript)
  11. linux配置apache服务器项目文档,Apache(Linux)服务器配置文档.doc
  12. NPOI Excel 单元格背景颜色对照表
  13. LeetCode4. 寻找两个有序数组的中位数
  14. 【Vue】—v-html指令
  15. 《黑镜》黑科技成真 | 解码脑电信号,AI重构脑中的画面
  16. Download SQL Server Management Studio (SSMS)下载地址
  17. Cannot use v-for on stateful component root element because it renders multiple elements.
  18. ①ESP8266-wifi模块使用方法
  19. 计算机显示发送报告,Word文档打不开提示发送错误报告的解决方法
  20. DNA损伤修复基因数据库

热门文章

  1. 向大家推荐一下我的笔记APP『百灵』,里面有丰富的面试资料
  2. SVG互动排版公众号图文 『两次物体移动与展开长图』 模板代码
  3. 全屏背景视频和混合模式文本的实现
  4. php打印出来乱码_PHP输出中文乱码怎么解决?
  5. python 拆分excel工作表_用python编写的excel拆分小工具
  6. [转发]知识图谱 (Knowledge Graph) 专知 荟萃
  7. 红米note8Pro6400万像素爆发,但不会这些拍照技巧,四摄等于摆设
  8. 数据库应用基础mysql_尔雅通识课《数据库应用基础(MySQL)》期末答案
  9. 旧金山犯罪预测与可视化分析
  10. 华中科技大学计算机学院刘明,彭芳瑜-华中科技大学机械科学与工程学院