在游戏开发中比较常用的音效素材都是比较短的,所以一般常用的API是playsound()函数,比如我们要在游戏背景中播放一个test.wav音效素材,只要简单的调用下面的函数即可

PlaySound("test.wav",NULL,SND_FILENAME|SND_ASYNC);

   如此简单,事实上我们看到,国内的游戏大致上都可以用PlaySound()搞定。但是既然是简单,从功能上就要受限了,如果遇到复杂的场景就没法用 playsound实现了,比如在场景中既有开门的声音,又有砍人的声音,你如果用playsound就没法同时听到两种声音,只能是一个声音完了再听到 另外一个声音,这时,就需要混音了。

  在网络视频会议开发中,如果不同的客户端同时发言,如何将多个不同端点的话音数据经网络传输到达某一个端点,经该端点的Wave设备输出,能同时听到多个人的话音,从而实现局域网络中多方的话音交谈,这也需要用到混音技术。

  在网络上实现话音交谈,特别强调实时性,要尽量保证话音的平滑、连续,因此为了保证话音数据连续,减少话音数据存储带来的延时,在具体实现中,话音的录制和播放都不采用文件的形式,录制和播放的话音数据都存在缓冲区中。在Windows系 统中,一般情况下,高层Wave接口函数无法直接播放缓冲区中的话音数据,而必须用底层函数来实现,常用的是Windows API中的Wave函数。将Wave数据在Wave设备上输出使用的是WaveOutWrite函数,但是该函数不支持多路Wave数据的同时播放,为了 能达到多路Wave数据同时播放的效果,对缓冲区中多路Wave数据进行必要的预处理后,再提交给Wave输出设备播放,实现原理如图1所示。


图1 多路Wave混音的实现原理


  这种混音的方式效果跟你采用的算法有很大关系,但是如果我们采用Directsound进行混音,就简单多了,我们只需要将我们要混音的内容传给它,Directsound会在内部自动进行混音的。下面我们就进入Directsound混音编程。

  在了解Directsound如何混音前我们先来看看DirectSound是如何播放一段wave音频的。

  这里只是简单的介绍一下播放声音的步骤。

  第一步,创建一个设备对象。

  在你的代码中你可以通过调用DirectSoundCreat8函数来创建一个支持IDirectSound8接口的对象,这个对象通常代表缺省的播放设备。当然你可以枚举可用的设备,然后将设备的GUID传递给DirectSoundCreat8函数。

  注意,Directsound虽然基于COM,但是你并不需要初始化com库,这些Directsound都帮你做好了,当然,如果你使用DMOs特技,你就要自己初始化com库了,切记。

  第二步,创建一个辅助Buffer,也叫后备缓冲区

   你可以通过IDirectSound8::CreateSoundBuffer来创建buffer对象,这个对象主要用来获取处理数据,这种 buffer称作辅助缓冲区,以和主缓冲区区别开来,Direcsound通过把几个后备缓冲区的声音混合到主缓冲区中,然后输出到声音输出设备上,达到 混音的效果。

  第三步,获取PCM类型的数据

  将WAV文件或者其他资源的数据读取到缓冲区中。

  第四步,将数据读取到缓冲区

  你可以通过 IDirectSoundBuffer8::Lock.方法来准备一个辅助缓冲区来进行写操作,通常这个方法返回一个内存地址,见数据从你的私人buffer中复制到这个地址中,然后调用IDirectSoundBuffer8::Unlock.

  第五步,播放缓冲区中的数据

   你可以通过IDirectSoundBuffer8::Play方法来播放缓冲区中的音频数据,你可以通过 IDirectSoundBuffer8::Stop来暂停播放数据,你可以反复的莱停止,播放,音频数据,如果你同时创建了几个buffer,那么你就 可以同时来播放这些数据,这些声音会自动进行混音的。
看到了吧,Directsound混音很简单,我们只要在一个设备上创建几个辅助的缓冲区,然后将数据读取到缓冲区中,同时的播放,Directsound就会自动在主缓冲区自动混音的。至于同时可以播放几个辅助缓冲区则有硬件设备的性能决定。

  在WDM驱动模式下,混音的工作由核心混音器来完成,不同的辅助缓冲区可能具有不同的WAV格式(例如,不同的采样频率),在必要的时候,辅助缓冲区的格式要转换成主缓冲区,或者核心混音器的格式。

   在VXD驱动模式下,如果你的辅助缓冲区都采用相同的音频格式,并且硬件的音频格式也和你的音频格式匹配,此时,混音器不用作任何的转换。你的应用程序 可以创建一个主缓冲区,然后通过IDirectSoundBuffer8::SetFormat来设置硬件的输出格式。要注意,只有你的协作度一定要是 Priority Cooperative Level.,并且,一定要创建辅助缓冲区前设置主缓冲区,DirectSound会将你的设置保存下来。

  在WDM模式下,对主缓冲区的的设置没有作用,因为主缓冲区的格式是由内核混音器来决定的。

利用Directsound编程实现实时混音相关推荐

  1. 关于win7下的创新A系列声卡设置,完美解决麦克不能实时加混音问题!

    关于win7下的创新A系列声卡设置,完美解决麦克不能实时加混音问题! 此贴于2010.9.9更新 此帖主要针对创新A系列(现手上只有A2ZS,Live系列只能参照)在vista.win7下不支持EAX ...

  2. 实时音频混音技术在视频直播中的实践应用

    作者:冼牛 转自:前端之巅 最近半年,视频直播领域中产生不少创新玩法,其中包括 K 歌直播和合唱直播.这些创新玩法都用到实时音频混音技术.今天我们来聊一下混音技术的实现,及其在创新玩法中的应用. 混音 ...

  3. 从实时音视频的微场景看混音技术

    作者|冼牛 编辑|覃云 最近半年,视频直播领域中产生不少创新玩法,其中包括 K 歌直播和合唱直播.这些创新玩法都用到实时音频混音技术.今天我们来聊一下混音技术的实现,及其在创新玩法中的应用. 混音的应 ...

  4. 实时音视频直播新玩法中的混音技术

    作者|冼牛 编辑|覃云 最近半年,视频直播领域中产生不少创新玩法,其中包括 K 歌直播和合唱直播.这些创新玩法都用到实时音频混音技术.今天我们来聊一下混音技术的实现,及其在创新玩法中的应用. 混音的应 ...

  5. 实时音频混音技术在视频直播场景中的实践

    最近半年,视频直播领域中产生不少创新玩法,其中包括K歌直播和合唱直播.这些创新玩法都用到实时音频混音技术.今天我们来聊一下混音技术的实现,及其在创新玩法中的应用. \\ 混音的应用场景 \\ 混音,顾 ...

  6. 即时通讯开发实时音频的混音如何在视频直播中实现

    随着视频直播应用被越来越广泛地接受,视频直播应用的相关技术和玩法也在不断翻新,以便持续地吸引和留住用户.这半年来,一些典型的创新玩法,包括K歌直播和合唱直播等都是非常受用户欢迎的.这些创新玩法都用到了 ...

  7. Python:利用python编程将上海十六区,2020年5月份房价实时地图(数据来源房天下)进行柱状图、热图可视化

    Python:利用python编程将上海十六区,2020年5月份房价实时地图(数据来源房天下)进行柱状图.热图可视化 目录 上海十六区,2020年5月份房价实时地图(数据来源房天下)可视化 雷达图.柱 ...

  8. DirectSound 混音的实现

    啥叫混音呢,其实很简单,如果两个人同时说话 ,他们俩发出的声波在空气中进行了波的叠加,这其实就是个混音.计算机的混音,其实是一个虚拟的混音操作,因为计算机其实是只有一个声源(现在的计算机通常有两声道甚 ...

  9. java sound 混音_iOS音频编程之混音

    title: iOS音频编程之混音 date: 2017-04-19 tags: Audio Unit,AUGraph, Mixer,混音 博客地址 iOS音频编程之混音 需求:多个音频源混合后输出, ...

最新文章

  1. PCM音频基础知识及采样数据处理
  2. 百度顶会论文复现(4):飞桨API详解
  3. JS笔记-前端实现验证码功能
  4. ios php mysql实例_php – 从iOS应用程序将图像存储到MYSQL数据库中
  5. [转]awesome-tensorflow-chinese
  6. Linux内核协议栈分析之网卡初始化——tcp/ip通信并不神秘(1)
  7. 以 Google 为例,什么才是好的管理制度?
  8. IE7,IE8,上传文件控件input file和asp.net FileUpload控件无法获取完整路径的解决办法...
  9. python3中split的用法_python3 - 对有规律的字符串进行切割(split用法)
  10. matlab阿卡曼公式,阿克曼函数--一个计算方法
  11. Google发布了Google Sketchup,完全免费
  12. AI创作教程之 Stable Diffusion 为何是人工智能新时代艺术创作的基石
  13. 魔窗使用笔记(穿透微信)
  14. 【转载】Java分布式键-值缓存系统Voldemort
  15. 线性方程组在计算机方面的应用,在线性方程组的简单应用》(安顺学院数学和计算机科.doc...
  16. 5、基于注解的AOP配置
  17. [深入研究4G/5G/6G专题-8]: 测试-测试终端-高端无线CPE/Router的高通SDX55 5G NR芯片方案
  18. 利用Python做excel文本合并(根据左侧单元格,快速合并右侧单元格内容)
  19. 英文连写字体怎么练_一篇文章教孩子学会衡水英文字体,建议收藏!
  20. 上传到linux服务器上的EXCEL、图片、文件地址获取不同

热门文章

  1. Python进阶09 filter函数
  2. 传微软有意收购EA公司,连《绝地求生》的蓝洞也想一并收入囊中
  3. 关于如何解决解决The SDK platform-tools version ((25.0.3)) is too old to check APIs compiled with API 26...
  4. elasticsearch的集中常见操作
  5. 为什么尽量避免使用 CSS 表达式
  6. 揭秘企业级web负载均衡完美架构(转载)
  7. mapx实现热点效果
  8. Kubernetes故障问题
  9. device tree --- #address-cells and #size-cells property【转】
  10. 浅尝Windows Server 2016——Container 容器:部署