场景介绍

音频播放的主要工作是将音频数据转码为可听见的音频模拟信号并通过输出设备进行播放,同时对播放任务进行管理。

接口说明

接口名

描述

AudioRenderer(AudioRendererInfo audioRendererInfo, PlayMode pm) throws IllegalArgumentException

构造函数,设置播放相关音频参数和播放模式,使用默认播放设备。

AudioRenderer(AudioRendererInfo audioRendererInfo, PlayMode pm, AudioDeviceDescriptor outputDevice) throws IllegalArgumentException

构造函数,设置播放相关音频参数、播放模式和播放设备。

boolean start()

播放音频流。

boolean write(byte[] data, int offset, int size)

将音频数据以 byte 流写入音频接收器以进行播放。

boolean write(short[] data, int offset, int size)

将音频数据以 short 流写入音频接收器以进行播放。

boolean write(float[] data, int offset, int size)

将音频数据以 float 流写入音频接收器以进行播放。

boolean write(java.nio.ByteBuffer data, int size)

将音频数据以 ByteBuffer 流写入音频接收器以进行播放。

boolean pause()

暂停播放音频流。

boolean stop()

停止播放音频流。

boolean release()

释放播放资源。

AudioDeviceDescriptor getCurrentDevice()

获取当前工作的音频播放设备。

boolean setPlaybackSpeed(float speed)

设置播放速度。

boolean setPlaybackSpeed(AudioRenderer.SpeedPara speedPara)

设置播放速度与音调。

boolean setVolume(ChannelVolume channelVolume)

设置指定声道上的输出音量。

boolean setVolume(float vol)

设置所有声道上的输出音量。

static int getMinBufferSize(int sampleRate, AudioStreamInfo.EncodingFormat format, AudioStreamInfo.ChannelMask channelMask)

获取Stream播放模式所需的buffer大小。

State getState()

获取音频播放的状态。

int getRendererSessionId()

获取音频播放的 session ID。

int getSampleRate()

获取采样率。

int getPosition()

获取音频播放的帧数位置。

boolean setPosition(int position)

设置起始播放帧位置。

AudioRendererInfo getRendererInfo()

获取音频渲染信息。

boolean duckVolume()

降低音量并将音频与另一个拥有音频焦点的应用程序混合。

boolean unduckVolume()

恢复音量。

SpeedPara getPlaybackSpeed()

获取播放速度、音调参数。

boolean setSpeed(SpeedPara speedPara)

设置播放速度、音调参数。

Timestamp getAudioTime()

获取播放时间戳信息。

boolean flush()

刷新当前的播放流数据队列。

static float getMaxVolume()

获取播放流可设置的最大音量。

static float getMinVolume()

获取播放流可设置的最小音量。

StreamType getStreamType()

获取播放流的音频流类型。

开发步骤

构造音频流参数的数据结构 AudioStreamInfo,推荐使用 AudioStreamInfo.Builder 类来构造,模板如下,模板中设置的均为 AudioStreamInfo.Builder 类的默认值,根据音频流的具体规格来设置具体参数。

AudioStreamInfo audioStreamInfo = new AudioStreamInfo.Builder().sampleRate(

AudioStreamInfo.SAMPLE_RATE_UNSPECIFIED)

.audioStreamFlag(AudioStreamInfo.AudioStreamFlag.AUDIO_STREAM_FLAG_NONE)

.encodingFormat(AudioStreamInfo.EncodingFormat.ENCODING_INVALID)

.channelMask(AudioStreamInfo.ChannelMask.CHANNEL_INVALID)

.streamUsage(AudioStreamInfo.StreamUsage.STREAM_USAGE_UNKNOWN)

.build();

以真实的播放pcm流为例:

AudioStreamInfo audioStreamInfo = new AudioStreamInfo.Builder().sampleRate(44100) // 44.1kHz

.audioStreamFlag(AudioStreamInfo.AudioStreamFlag.AUDIO_STREAM_FLAG_MAY_DUCK) // 混音

.encodingFormat(AudioStreamInfo.EncodingFormat.ENCODING_PCM_16BIT) // 16-bit PCM

.channelMask(AudioStreamInfo.ChannelMask.CHANNEL_OUT_STEREO) // 双声道

.streamUsage(AudioStreamInfo.StreamUsage.STREAM_USAGE_MEDIA) // 媒体类音频

.build();

使用创建的音频流构建音频播放的参数结构AudioRendererInfo,推荐使用AudioRendererInfo.Builder类来构造,模板如下,模板中设置的均为AudioRendererInfo.Builder类的默认值,根据音频播放的具体规格来设置具体参数。

AudioRendererInfo audioRendererInfo = new AudioRendererInfo.Builder().audioStreamInfo(audioStreamInfo)

.audioStreamOutputFlag(AudioRendererInfo.AudioStreamOutputFlag.AUDIO_STREAM_OUTPUT_FLAG_NONE)

.bufferSizeInBytes(0)

.distributedDeviceId("")

.isOffload(false)

.sessionID(AudioRendererInfo.SESSION_ID_UNSPECIFIED)

.build();

以真实的播放pcm流为例:

AudioRendererInfo audioRendererInfo = new AudioRendererInfo.Builder().audioStreamInfo(audioStreamInfo)

.audioStreamOutputFlag(AudioRendererInfo.AudioStreamOutputFlag.AUDIO_STREAM_OUTPUT_FLAG_DIRECT_PCM) // pcm格式的输出流

.bufferSizeInBytes(100)

.distributedDeviceId("E54***5E8") // 使用分布式设备E54***5E8播放

.isOffload(false) // false表示分段传输buffer并播放,true表示整个音频流一次性传输到HAL层播放

.build();

根据要播放音频流指定 PlayMode,不同的 PlayMode 在写数据时存在差异,详情见[步骤7],其余播放流程是无区别的。并通过构造函数获取 AudioRenderer 类的实例化对象。

使用构造函数获取 AudioRenderer 类的实例化对象,其中[步骤2],[步骤3]中的数据为构造函数的必选参数,指定播放设备为可选参数,根据使用场景选择不同的构造函数。

(可选)构造音频播放回调,首先构造对象 AudioInterrupt,其中 setInterruptListener 方法的入参需要实现接口类 InterruptListener, setStreamInfo 方法使用[步骤1]的 AudioStreamInfo 作为入参。然后调用 AudioManager 类的 activateAudioInterrupt(AudioInterrupt interrupt)方法进行音频播放回调注册。代码示例如下:

AudioInterrupt audioInterrupt = new AudioInterrupt();

AudioManager audioManager = new AudioManager();

audioInterrupt.setStreamInfo(streamInfo);

audioInterrupt.setInterruptListener(new AudioInterrupt.InterruptListener() {

@Override

public void onInterrupt(int type, int hint) {

if (type == AudioInterrupt.INTERRUPT_TYPE_BEGIN

&& hint == AudioInterrupt.INTERRUPT_HINT_PAUSE) {

renderer.pause();

} else if (type == AudioInterrupt.INTERRUPT_TYPE_BEGIN

&& hint == AudioInterrupt.INTERRUPT_HINT_NONE) {

} else if (type == AudioInterrupt.INTERRUPT_TYPE_END && (

hint == AudioInterrupt.INTERRUPT_HINT_NONE

|| hint == AudioInterrupt.INTERRUPT_HINT_RESUME)) {

renderer.play();

} else {

}

}

});

audioManager.activateAudioInterrupt(audioInterrupt);

调用 AudioRenderer 实例化对象的 start() 方法启动播放任务。

将要播放的音频数据读取为 byte 流或 short 流,对于选择 MODE_STREAM 模式的 PlayMode,需要循环调用 write 方法进行数据写入。对于选择 MODE_STATIC 模式的 PlayMode,只能通过调用一次 write 方法将要播放的音频数据全部写入,因此该模式限制在文件规格较小的音频数据播放场景下才能使用。

(可选)当需要对音频播放进行暂停或停止时,调用 AudioRenderer 实例化对象的 pause() 或 stop() 方法进行暂停或停止播放。

(可选)调用 AudioRenderer 实例化对象的 setSpeed 调节播放速度,setVolume 调节播放音量。

播放任务结束后,调用 AudioRenderer 实例化对象的 release() 释放资源。

鸿蒙音频低延迟,鸿蒙OS 音频播放开发指导相关推荐

  1. 【技术分享】Windows平台低延迟RTMP、RTSP播放器接口设计探讨

    背景 我们看过了太多介绍RTSP.RTMP播放相关的技术资料,大多接口设计简约,延迟和扩展能力也受到一定的局限,好多开发者希望我们能从接口设计的角度,大概介绍下大牛直播SDK关于RTMP.RTSP播放 ...

  2. 低延迟音频中的音频解码优化策略

    文章目录 前言 音频播放 举个例子:PortAudio 回调函数 解码与播放 优化策略 1. 一次性读取音频到内存中 2. MMAP 3. 音频转码,再接 MMAP 4. 解码缓冲 总结 参考资料 前 ...

  3. IE浏览器下如何低延迟播放RTSP或RTMP流

    首先,虽然本文是介绍IE浏览器下OCX控件播放RTSP或RTMP,但这种方式并不推荐,毕竟它只能用于IE浏览器环境下,局限太大,而且随着微软IE浏览器的更新,不确定后续支持情况.当然,话说回来,如果是 ...

  4. 在谷歌Chrome上用VLC低延迟(300毫秒)播放播放海康大华RTSP

    一.历史背景 在遍地都是摄像头的今天,往往需要在各种B/S信息化系统中集成视频播放功能,海康.大华.华为等大厂摄像头遵循监控行业标准,一般只支持RTSP传输协议,而Chrome.Firefox.Edg ...

  5. OpenHarmony OpenSl ES音频播放开发

    1.OpenHarmony OpenSl ES音频播放简介 开发者可以通过本博文了解在OpenHarmony中如何使用OpenSL ES接口进行音频播放相关操作:当前仅实现了部分OpenSL ES接口 ...

  6. 在Chrome、Firefox等高版本浏览器中实现低延迟播放海康、大华RTSP

    一.背景 现在到处是摄像头的时代,随着带宽的不断提速和智能手机的普及催生出火热的网络直播行业,新冠病毒的大流行又使网络视频会议系统成为商务会议的必然选择,因此RTSP实时视频流播放及处理不再局限于安防 ...

  7. 谷歌Chrome浏览器低延迟(低于500ms)播放海康威视、浙江大华RTSP解决方案(演示视频)

    Chrome.Firefox等浏览器低延迟(300ms)播放海康.大华RTSP解决方案(演示视频)

  8. 高吞吐、低延迟 Java 应用的 GC 优化实践

    2019独角兽企业重金招聘Python工程师标准>>> 背景 高性能应用构成了现代网络的支柱.LinkedIn 内部有许多高吞吐量服务来满足每秒成千上万的用户请求.为了获得最佳的用户 ...

  9. 周志明:深入java虚拟机_虚拟面板:在低延迟环境中使用Java

    周志明:深入java虚拟机 Java越来越多地用于低延迟工作,而以前的C和C ++早已成为Java的实际选择. InfoQ聚集了该领域的四位专家,讨论了驱动趋势的因素以及在这种情况下使用Java的一些 ...

最新文章

  1. 面试官:我把数据库部署在Docker容器内,你觉得如何?
  2. TCP/IP学习笔记-如何理解
  3. Android Hander机制的理解
  4. python3.7安装wordcloud_Python中的wordcloud库安装问题及解决方法
  5. 中文分词算法工具hanlp源码解析
  6. C 中细节问题的试题
  7. SQL中truncate 、delete与drop区别 (Rollback Segment)
  8. 基于内容的垃圾邮件过滤
  9. C语言实现扫雷小游戏
  10. 游戏开发程序员可能会遇到的英文单词
  11. python的分布式爬虫框架
  12. Problem A: 判断是否是素数
  13. opencv 图像的变换
  14. Elasticsearch:运用 Java 对索引文档进行搜索
  15. 【C语言】机试100题及代码答案(上)
  16. WPF实现微信客户端界面布局
  17. JAVA订餐系统的心得体会
  18. 都有哪些数据恢复软件是免费的?
  19. Flutter33,Android移动开发基础
  20. 分享一些下载HTML模板的网站吧

热门文章

  1. 日本最惨数学天才!37岁裸辞,房子被政府没收,向全村人乞讨,一家五口只能吃野菜.........
  2. 苹果手机怎么查看足迹_苹果手机打电话怎么录音
  3. 戴尔7060安装win10系统教程
  4. 系统重装用户名与计算机名一致,win7刚重装系统 开机的用户名和密码怎么办-win7用户名,win7默认用户名是什么...
  5. MPEG-7描述子(0)——颜色空间
  6. 使用EXCEL计算并绘制MACD指标
  7. qtcpsocket断开_关于QSocket的释放的一个需要注意的情况(必须先断开连接)
  8. 鹏鹏:You have 14 unapplied migration(s). Your project may not work properly。。。。报错!
  9. mysql skip 1062_【20180205】MySQL 1032和1062跳过错误总结
  10. stream has already been operated upon or closed错误