VR中为什么需要把游戏音频放在聚光灯里?

本文章由cartzhang编写,转载请注明出处。 所有权利保留。
文章链接:http://blog.csdn.net/cartzhang/article/details/52984767
作者:cartzhang

本文最初发表在Audiokinetic 的博客上面

存在感

人们挂在嘴边来描述VR(虚拟现实)的单词是“沉浸感”。的确是很酷的一个词。然而为实现这终极目标,开发者需要在虚拟现实的环境中模拟身体的知觉,我们称着为存在感。存在是一种心理状态或主观感知,其中,部分或整体个人体验感受是/或是通过人造的科技过滤产生的,部分或整体体验是/或是由在体验中对角色的精确认知导致人为认知衰退造成的。

创造这个级别的真实体验确实是一个挑战。当前的图形比之前几年有了巨大的进步,音频仍然有很长的路要走,以达到其在这个新的和仍在发展的VR领域中发挥主要作用的真正潜力。

在VR游戏中空间包围和多感官应用

在独立和PC游戏中,沉浸感被分为三项:叙事性沉浸(玩家投入到故事中去),战术沉浸(玩家执行涉及到技能的操作)和策略沉浸(更专注,与精力挑战)。然而在VR中,又添加了第四项:空间沉浸,也就是说玩家在人造的世界中对他们来说是真实的。在包括前三项的沉浸感中,当涉及到存在感和提供可信性和沉浸的环境中,空间沉浸变的非常重要。

人为了生理上对自己定位,我们的视觉系统通常被用来帮助身体感觉环境,耳朵提供了关于我们周围环境的重要信息,味觉也同样提供周围信息。

音频在某角度来说比视觉更好,因为不受视觉范围的限制,而是对我们周围环境信息提供了360度的反馈。

为创建真实空间的沉浸感,理想情况下,我们希望可以利用我们的五官,且有全感觉加工处理(在一个环境中有效的使用我们的身体的过程)。问题在于当前阶段的VR开放,我们不可能使用全部的五官感觉。视觉和听觉做为了主要的因素,触觉不是很有效,味觉和气味完全没有用武之地。在这种情况下,听觉也许是我们可以开发的用来“影响”用户大脑的最强大的媒介了,创建一个完整的360度体验,提高空间沉浸,由于它是通过一个虚拟的源通过模拟声学来呈现一个现实的空间(这个在场景中或实际中不是必须的)

360度的体验创建空间沉浸

实现音频增强空间沉浸感的第一步是音频定位。从最近的研究(Skalski & Whitbred, 2010)中出现一个模式表明,在游戏中(环绕立体声)中,更好的音源位置对玩家空间沉浸感和享受的影响比视频质量(高清VS普清)要大的多。

大脑通过我们两只耳朵之间的响度,音调和时间的细微差别来定位声源在三维中的位置(水平,垂直和距离)。在虚拟现实中,玩家确实在场景中间,因此在模拟声音环境中决定声源位置的过程,对创建自然听觉体验音频改进是最重要的。

在媒体史的早起,我们发现人耳第一次双耳录音来拾取三维音频可追溯到1881年。

“双耳录制是一种使用两个麦克风录制声音的方法,旨在为演奏者或乐器的房间中的收听者创建三维立体声感觉。 这种效果通常使用称为“伪人头录音”的技术来创建,其中在人体模型头部每个耳朵中配备有麦克风。“(维基百科,”双耳录音“)

在游戏中,3D音频应该用实时处理的方法来创建,因为我们没有办法预期声音对象的硬广在某个位置,来匹配玩家位置和头部移动。因此在其被发明一个世纪后,现在双耳录音正在被重新使用,且工程师和投资者都正在努力开发适合于VR的最近双耳算法。

而实际上,由于需使用的立体声耳机而不是扬声器来复制3D定位(在VR中将玩家与外部世界隔离是必要的,并且对于视野范围,需要可以匹配相对于头/耳运动的音频回放)的这个特性 ,专业人员逻辑上愿意选择双耳作为3D音频处理的新标准,而不是通常的环绕技术(仅限于水平和距离音频定位)。

总结

在我们使用VR时,有许多音频事情需要挑战、考虑,且需求正在增长。通过进一步的探索,我们将会推动VR和游戏产业的边际。虽然游戏行业一直在提高最新一代优先级的画面质量,伴随这VR的迅速崛起,VR行业迅速的集中到来音频领域,因为VR社区意识到,更好的音频实现会大大增加玩家的享受和参与感,提高沉浸状态,最终提高存在感。

360度的音频定位只是VR开发带来的音频改进的一个直接结果。音频的处理工具也随着VR需求发展也不断发展,新技术及其在混合领域用于VR技术需求方面,以增强VR体验。

音频是行业探索和聚焦的下一个新媒介,VR肯定会让音频成为焦点!

原帖地址:
http://www.gamasutra.com/blogs/AlexRiviere/20161012/283142/Why_VR_will_put_Game_Audio_in_the_Spotlight.php

作者:Audiokinetic

本文同步发布与蛮牛:
http://www.manew.com/thread-96556-1-1.html


若有问题,请随时联系!!

VR中为什么需要把游戏音频放在聚光灯里?相关推荐

  1. 一、创建Assetbundle 在unity3d开发的游戏中,无论模型,音频,还是图片等,我们都做成Prefab,然后打包成Assetbundle,方便我们后面的使用,来达到资源的更新。

    一.创建Assetbundle 在unity3d开发的游戏中,无论模型,音频,还是图片等,我们都做成Prefab,然后打包成Assetbundle,方便我们后面的使用,来达到资源的更新. 一个Asse ...

  2. Unity VR游戏开发干货教程:VR中的交互方式

    原文:http://www.gameres.com/495107.html 在VR项目中,我们需要在用户"凝视"某个物体时将其激活.在VRSamples中,我们构建了一个简单的,可 ...

  3. 想在VR中体验暴雪爸爸的游戏,还得再等等

    暴雪总监表示近期不会推出VR游戏,对VR持观望态度. 游戏大厂对于VR游戏的态度一直很模糊,在今年六月份的E3上,有些说好了要发布VR游戏的公司,大半年过去现在没有图像也没有声音.最近,动视暴雪倒是明 ...

  4. CS-REPORTERS公司旗下游戏品牌Gugenka from CS-REPORTERS.INC今天宣布将于2017年5月26日发售手机用VR游戏《在VR中与雷姆的异世界生活~膝枕篇陪睡篇(原名:

    CS-REPORTERS公司旗下游戏品牌Gugenka from CS-REPORTERS.INC今天宣布将于2017年5月26日发售手机用VR游戏<在VR中与雷姆的异世界生活-膝枕篇& ...

  5. VR中多模式异步协作的挑战和设计考虑因素

    VR中多模式异步协作的挑战和设计考虑因素 原作者: KEVIN CHOW, University of British Columbia, Canada CAITLIN COYIUTO, Univer ...

  6. VR中的9轴传感器(重力加速度/陀螺仪/磁力计)

    ref:https://blog.csdn.net/dabenxiong666/article/details/53836503 前言 传感器的调试过程,一般根据原厂提供demo代码,调试数据接口,将 ...

  7. 索尼:声控将在VR中发挥大作用

    (52VR开发网2017年5月17日讯)索尼的Richard Marks作为PlayStation VR(PSVR)头显的最早开发人员之一,并为公司的无数其他外围设备做了大量工作,对于未来的科技知之甚 ...

  8. 扫描自己进入VR中 SLAM Scan 3D引擎将做到

    扫描自己进入VR中 SLAM Scan 3D引擎将做到 2016-03-22 10:58:09我要纠错 把17173装进手机神评论0 只需要点击拍照就可以将你的脸上传到虚拟现实世界中 瑞士软件初创公司 ...

  9. html支持的语音文件格式,html5中如何设置audio支持音频格式

    html5中如何设置audio支持音频格式 发布时间:2020-04-15 10:24:37 来源:亿速云 阅读:367 作者:小新 今天小编给大家分享的是html5中如何设置audio支持音频格式, ...

最新文章

  1. 第一个以自己语言描述GBDT算法
  2. aliyun redis 链接超时_用redis做异步队列,原来还可以这样
  3. 电脑登陆不了网页的服务器地址,电脑登陆qq打不开网页怎么设置
  4. 在Spring MVC Web应用程序中添加社交登录:单元测试
  5. python宏替换_简单的宏替换
  6. ApacheCN 学习资源汇总 2019.3 1
  7. 从零开始学php 光盘,从零开始学PHP(第2版)(含DVD光盘1张)
  8. HDU 5510---Bazinga(指针模拟)
  9. 如何安装老版本Eclipse汉化——以2020-06为例
  10. linux pe系统下载,WINPE LINUX DOS 完美者U盘维护系统V8.1 正式版
  11. JQuery Ajax 参数含有特殊字符
  12. python如何调整word表格宽度_怎么批量修改Word表格的宽度
  13. PTA L2-048 寻宝图 (25 分)
  14. Linux 命令 | 常用命令之 cut
  15. 008.环形链表 II-双指针
  16. 自定义注解+切面处理+全局异常处理
  17. 混凝土与水泥制品行业运行分析
  18. SpringBoot 异步接口
  19. MDI窗体(多文档界面)
  20. Catalan 数之Python演示

热门文章

  1. HTTP请求中POST与GET的区别
  2. Fatfs配置与编译
  3. 手把手教会你安装GitForWindows和TortoiseGit
  4. 【恒指早盘分析】9.10恒指今日总结及后市思路
  5. SpringBoot集成百度AI实现人脸识别
  6. 手握国企offer,33岁程序员不按常理出牌,网友炸了!
  7. T12焊台和JBC焊台自制资料(原理和电路)
  8. Unity 批量重命名文件工具
  9. html 小设备折叠显示器,可折叠触摸显示器迎来技术风口 贺利氏推出Clevios HY E新材料...
  10. layer弹框,弹出后自动关闭