导语

游戏多媒体引擎(Game Multimedia Engine,GME)作为游戏语音的PaaS服务,致力于提升游戏语音的质量,简化语音接入的流程,创造更多的语音玩法。GME基于Wwise引擎推出了独有的解决方案,目前是Wwise官方支持的唯一语音合作伙伴,本文将对Wwise + GME方案做简单的介绍,看一看那些被解锁的游戏语音新玩法。

"如果你的团队正在使用Wwise音频组件,一定要使用GME for Wwise这套解决方案,它非常完美地解决了我们在即时语音功能上遇到的所有问题。"
—— from 《香肠派对》项目团队

当你玩吃鸡时,右侧突然出现窸窸窣窣的脚步声,伴随一声枪响在右耳边炸开,身旁的队友瞬间倒地,队友的惊呼中还带着被击中后痛苦的颤音....

当你进入狼人杀房间,映入眼帘的是夜晚的草原篝火背景,玩家围绕着篝火席地而坐,耳机里隐约传来左边玩家的窃窃私语,主持人的讲述里还夹杂着远处的狼嚎,闭眼,睁眼,今晚又有人被毒...

这些游戏里语音与游戏场景完美融合的效果,能为游戏玩家提供身临其境的沉浸式游戏体验。上一篇《来了!GME沉浸式方案助力游戏实现Metaverse的无限可能》文章中,我们提到Metaverse游戏核心在于真实而沉浸的互动体验。

而在实际操作中,游戏语音如何深度融合游戏场景,为玩家最大程度“还原临场感”却面临诸多困难。为了解决这些行业难题,提升游戏语音体验,作为顶级互动音频引擎Wwise唯一官方授权的语音插件,GME和Wwise的研发团队联合推出了独家语音解决方案。

Game Multimedia Engine(GME)游戏多媒体引擎是针对游戏场景定制的一站式语音解决方案,提供了包括多人实时语音、语音消息、语音转文本以及语音内容审核等功能,开发者需要通过API调用接入GME SDK,从而在游戏中实现语音功能。

传统的独立语音SDK方案接入过程是独立于游戏音效设计的,而基于Wwise音频引擎开发的游戏,GME提供了专门的解决方案,通过使用相应的GME语音插件,游戏开发者可以将语音的接入融入到游戏音效的设计过程,Wwise强大的音频处理能力和音频控制能力都可以运用到语音上,在提升语音音质的同时,为游戏音效提供了更加丰富的语音玩法设计空间。其基本流程框架如下:

由上图可以看出,GME的几个插件把本地的待发送语音(麦克风录制的本地玩家语音)和从网络接收到的语音(待本地播放的其它队友语音)全部送到了Wwise的处理管线中,GME语音流被抽象成了Wwise的基本声音源进行处理,正是基于这样的新颖设计,Wwise-GME相比于传统的独立语音SDK具有独有的优势。

语音与游戏音效统一设计

在Wwise工程中,GME语音音频流无缝接入Wwise音频管线,接入语音的过程和Wwise的音效设计过程深度融合,避免了单独接入一套语音SDK可能引起的音频冲突。在游戏程序端,对GME语音发送和接收的操作抽象成一个个Wwise事件的触发,这些操作和Wwise的标准开发流程体验一致,比以前的API调用的接入方式更直接,更形象。

完美解决行业内痛点

对于传统的独立语音SDK方案,语音开麦以后的游戏音效质量下降、音量跳变以及声音发干都曾是行业痛点,开麦后整个游戏的音效音质都进入“电话音质”级别(低采样率的单声道信号),极大的影响了玩家的游戏体验。Wwise-GME有效解决了手游开麦以后音量类型切换导致的游戏音效质量下降的问题,大幅提升了开麦后语音的音质,在畅快聊天的同时仍然可以保持原有音效做到听声辩位。

强大的设计能力,带来无限的玩法创意

Wwise-GME方案给游戏语音玩法带来非常大的设计空间,由于语音流全部送入Wwise总线,可将Wwise上丰富的音效处理和控制运用到语音,并且能定制化处理每一路语音流,从而增加游戏过程中语音的沉浸感和趣味感,让玩家交流“不出戏”。

对于每一名玩家来说,语音聊天主要涉及两条音频流链路,一条是上行链路,即本地麦克风采集自己的说话声,通过服务器分发到远端队友,另一条是下行链路,即从服务器接收所有队友的语音,混音后经过本地的播放设备播放出来。

上行链路

玩家本地的聊天语音流会经过GME采集插件发送给Wwise引擎,基于Wwise提供的丰富的音效处理能力,游戏端可以根据玩家所处的实际环境和需求来对语音流进行处理,比如质地,混响和变声处理等,试想现在玩家的角色是在教堂中,则处理后的带有教堂混响的语音流会通过GME发送插件发送到服务器中,进而发送到远端的玩家。同样,如果游戏设计了变声玩法,经过实时变声算法处理的语音流会发送到远端的玩家。

上行链路处理流程

下行链路

相比上行链路的单路本地语音流,下行链路通常会收到所有队友的N路语音流,这些语音流会通过GME接收插件传给Wwise引擎,同样游戏端可以根据每一路接收语音对应的玩家在游戏中的实际场景,比如相对本地玩家的位置,距离和有无障碍物阻挡等进行对应的音效处理,处理后的数据经过Wwise混音后在本地设备播放。

具体的游戏场景中,比如队友A站在本地玩家的左前方,那么他听到队友A的声音就是在左前方发出来,队友B跳到一个岩石后边,那么他听到队友B的声音就是经过岩石阻挡并折射出来的声音,同时随着队友接近或者远离听者,对应的声音也会被增强或者衰减。

下行链路处理流程

这种基于游戏场景处理过的语音不再像传统独立语音SDK那样只能提供“语音会议”般的游戏体验,而是把语音体验提升到了更高的层次,即与游戏场景融合的沉浸式语音体验。下面这个视频就展示了Wwise-GME方案的一些基本用法,如果用手机观看Demo视频,需要戴耳机观看,因为这里边运用了双耳虚拟声场技术。

视频中你是第一人称视角,对面灰色机器人是其他队友和你通过GME讲话,3D,变声和混响等都运用到语音聊天处理当中,视频中的所有语音都是实时录屏远端玩家发送的语音,而并非后期合成制作。

Wwise+GME:3D、变声、环境混响效果

(点击播放,Demo中运用双耳虚拟声场技术,需要戴耳机感受最佳效果,顺便练习下英语听力~)

Wwise-GME方案这种独特的设计使语音作为游戏音效设计的一部分成为可能,这里列出笔者想到的一些可能的语音处理,更多的玩法期待音频设计师的创作。

发送环境声音或伴奏音

GME提供的不单单是发送玩家语音的能力,还具备发送其它音频流到语音服务器的能力。这个能力最显而易见的应用场景就是卡拉OK了。对于游戏来说,试想这样的游戏场景,玩家在游戏中的角色处在雨中或者风中,当玩家和队友通话的时候,沉浸式的体验就需要把雨声或者风声适当的混音到语音当中。当然还有一些其它的应用场景,比如根据玩家在游戏中的进程发送一些声音Emoji增加语音的趣味性。

模拟语音的反射衍射等处理

沉浸式的语音体验一定要把语音的渲染和游戏的实际场景结合起来考虑。本文之前提到的质地、衰减、变声、混响以及3D定位处理只能算是初阶的处理,为了更好的模拟游戏场景中说话人与听者的语音传输路径,Wwise提供的反射、衍射、声笼和阻挡模型同样可以用来处理队友之间的语音,这些处理的效果正是元宇宙(Metaverse)对语音的终极体验。

人物性格和状态处理

为了增加游戏语音的趣味性,根据玩家在游戏场景中的一些性格和状态变化也可对其语音做一些特定设计的DSP处理。比如在游戏中的玩家被对手击打掉血,那么语音上做一些失真,延迟或者颤音处理表明玩家的痛苦状态,再比如玩家PK掉了对手或者拾到了宝贝,就对语音做一些高通滤波或者语音加速处理,从而体现玩家的兴奋程度等等。

侧链的处理

侧链是混音制作过程中必不可少的处理手段,其基本原理就是用一路信号控制另一路信号。游戏中加入语音功能是为增加游戏的社交属性,语音必须要清晰地传递到听者,当有玩家说话时候,游戏声音混音的焦点就应该落到语音上而不是游戏本身的音效,这就类似收音机电台的做法,DJ要讲话时会让播放的音乐音量降低些,等讲完了话就把音量恢复。

Wwise-GME方案把语音流全部送入了Wwise总线使这种处理在游戏场景下也成为可能,比如在接收的语音处设置一个Wwise Meter,然后根据这个Meter的值动态的控制其它音效的音量大小。

下面这段视频是Wwise的开发商Audiokinetic联合GME制作的Demo视频,其中展示了比如声音反射,阻挡和侧链对GME语音的处理。视频中展示了第一人称第三人称和俯视图视角,绿色机器人是队友和你通过GME讲话,随着机器人所处的位置和环境变化,对应的处理就会施加到语音上(处理细节字幕有描述),这样处理过的语音聊天会让人有身临其境的感觉。同样,视频中的所有语音都是实时录屏远端玩家发送的语音,而并非后期合成制作。

Wwise+GME集成效果

(点击播放,Demo中运用双耳虚拟声场技术,需要戴耳机感受最佳效果~)

游戏语音解决方案GME和音频引擎中间件Wwise,两个产品各自可以从不同的角度提升游戏的品质,GME增强了游戏的社交属性,从而增加游戏对玩家的粘性。

Wwise音频引擎大幅提高了游戏中互动音效的开发效率,并且提高了游戏中的声音体验。当游戏语音解决方案GME遇到音频引擎Wwise时,GME填补了Wwise生态在语音方面的空白,两者在一起必然会产生出一加一大于二的效果,相信它们的融合方案Wwise-GME会成为游戏音效设计师的强有力工具,为游戏中创造最好最真实最富有创意的声音。

目前,Wwise+GME语音插件已上架Wwise官网并对全行业开放。

01 Wwise+GME方案后续还有操作详解和创意征集活动,福利多多,大佬云集,欢迎持续关注我们!

02 对Wwise+GME方案感兴趣,可扫码关注公众号回复「联合方案」加入交流群

Wwise + GME游戏语音方案:解锁更多语音玩法,让玩家“声临其境”相关推荐

  1. B站品牌如何实现年轻化营销?看奥利奥在B站解锁更多种草“玩法”!

    我们可以看到,食品品牌们正在积极地拥抱B站.喜茶.茶颜悦色入驻B站后坚持更新,螺霸王.三只松鼠等品牌也争相出现UP主的"恰饭"视频中,它们都在积极的与UP主展开合作. 对食品品牌而 ...

  2. 有语音的计算机玩法,用了5年的华为,今天才发现语音助手有这么多玩法,真是太丢脸了...

    语音助手这个功能已经成为了当下智能手机的标配,不知道大家有没有经常使用语音助手的习惯,反正之前小编一直不习惯用.导致用了5年的华为,今天才发现语音助手有这么多玩法,真是太丢脸了! 不知道大家是不是像小 ...

  3. 《花雕学AI》23:中文调教ChatGPT的秘诀:体验测试与通用案例,解锁无限有趣玩法!

    引言: 你有没有想过和一台智能机器人聊天?你有没有想过让一台智能机器人为你创作诗歌.故事或歌曲?你有没有想过让一台智能机器人陪你玩游戏.学习或社交?如果你的答案是肯定的,那么你一定会对ChatGPT感 ...

  4. 让虞书欣、李诞拍到停不下来!AR+AI双引擎的互动小游戏,如何打开IP新玩法?...

    有眼尖的朋友已经发现,近期爱奇艺的热播剧们有了新"看"法:在日常追剧的间隙,结合了IP要素的趣味视频互动特效小游戏玩法吸引了百万用户参与互动的热潮,更激发了The9全员.李诞等娱乐 ...

  5. 小程序源码:游戏助手微信小程序源码王者荣耀战力查询,游戏扫码登录器-多玩法安装简单

    这是一款游戏助手小程序源码,UI方面的话还是挺简单,小编个人看着挺舒服的 小程序内支持多种热门游戏扫码登录,也就是说是一个游戏登录器 比如英雄联盟,王者荣耀,和平精英等等热门游戏都支持 另外还有王者战 ...

  6. 路由+ros+linux,ROS+openwrt(旁路由) IP分流稳定出国方案 ESXI高端玩法

    ROS+openwrt(旁路由) IP分流稳定出国方案 ESXI高端玩法 2020-03-18 08:39:45 21点赞 173收藏 73评论 原来一直都是单openwrt方案(应该是ks lede ...

  7. 游戏商店系统定时限购玩法设计是否合理

    今天在重写一个商店系统的服务端,并且对整套商店系统进行了一个结构性优化,新加了一个叫按时间限购的功能.这个功能的存在是否合理呢? 玩家操作游戏产生价值,如获得物品,价值货币,通过物品或者价值货币进行消 ...

  8. fla 走迷宫游戏 源码_迷宫新玩法,果断一试

    迷宫, 真的是谜一样的存在, 大到几十岁的成年人, 小到三岁小儿, 都对其没有抵抗力. 而迷宫君也是真给力, 除了能给人带来愉悦感与成就感, 还能同时锻炼专注力.空间感.思维力.视觉追踪等, 是儿童感 ...

  9. 微信小游戏的前端攻城狮玩法

    转自自己在开源中国上的博客:https://my.oschina.net/u/7247... 前言 公司群里经常有人会发一些微信小游戏,每次下面都会跟好多晒分截图.比如这个<看你有多色>的 ...

  10. 又一款新品挺进美国iOS游戏畅销榜:除了做玩法混合,三消还能怎样赢得玩家?

    白鲸出海在 9 月初曾报道,土耳其休闲游戏公司 Dream Games 宣布完成 5000 万美元融资,2 天之前,该公司的首款手游「Royal Match」上线.笔者注意到,到了 9 月底,这家公司 ...

最新文章

  1. 5.1基于JWT的认证和授权「深入浅出ASP.NET Core系列」
  2. C#中的参数传递(转)
  3. Django - 网页加载报错:A server error occurred. Please contact the administrator(亲测)
  4. python聚类的结果显示_使用Python进行聚类
  5. ImageMagick 打水印支持透明度设置
  6. c++没有终结符的多行输入如何停止_如何使用iloc和loc 对Pandas Dataframe进行索引和切片...
  7. 360浏览器登录_浏览器发展历史介绍及当今主流浏览器的详细对比
  8. iOS开源App整理
  9. php链接mysql数据库 p_php连接mysql数据库的几种方法
  10. 免费、正版、最新的Idea(教育免费版)获取流程!!
  11. ubuntu设置maven环境变量
  12. 【linux】通过xshell上传文件
  13. 未来教育全国计算机考试,未来教育.全国计算机等级考试
  14. Windows搭建基于EClipse的CppUTest单元测试环境
  15. 3.1 Vendor Model浅析
  16. 一加nfc门禁卡录入_一加7T手机如何开启NFC、复制门禁卡等功能
  17. python sdk是什么_SDK 和 API 的区别是什么?
  18. canvas手写签名
  19. SIM不识卡简单分析流程
  20. Jquery鼠标滚轮放大缩小图片

热门文章

  1. Mac版PScc破解安装方法
  2. Allegro走等长线设置
  3. windsns社交门户系统源码v1.0-掌上移动社交类SNS网站系统源码
  4. 复变函数(第五版)课后答案 余家荣 版 课后习题答案 高等教育出版社 第一章 课后题答案与解析
  5. 视频--Pr 第一个剪辑
  6. 一天搞懂深度学习—学习笔记1
  7. EA6900刷梅林教程超详细
  8. 【Solr原理】Leader Shard选举
  9. Android 设置背景透明度
  10. Java常用软件安装包分享