VR中为什么需要把游戏音频放在聚光灯里?
VR中为什么需要把游戏音频放在聚光灯里?
本文章由cartzhang编写,转载请注明出处。 所有权利保留。
文章链接:http://blog.csdn.net/cartzhang/article/details/52984767
作者:cartzhang
本文最初发表在Audiokinetic 的博客上面
存在感
人们挂在嘴边来描述VR(虚拟现实)的单词是“沉浸感”。的确是很酷的一个词。然而为实现这终极目标,开发者需要在虚拟现实的环境中模拟身体的知觉,我们称着为存在感。存在是一种心理状态或主观感知,其中,部分或整体个人体验感受是/或是通过人造的科技过滤产生的,部分或整体体验是/或是由在体验中对角色的精确认知导致人为认知衰退造成的。
创造这个级别的真实体验确实是一个挑战。当前的图形比之前几年有了巨大的进步,音频仍然有很长的路要走,以达到其在这个新的和仍在发展的VR领域中发挥主要作用的真正潜力。
在VR游戏中空间包围和多感官应用
在独立和PC游戏中,沉浸感被分为三项:叙事性沉浸(玩家投入到故事中去),战术沉浸(玩家执行涉及到技能的操作)和策略沉浸(更专注,与精力挑战)。然而在VR中,又添加了第四项:空间沉浸,也就是说玩家在人造的世界中对他们来说是真实的。在包括前三项的沉浸感中,当涉及到存在感和提供可信性和沉浸的环境中,空间沉浸变的非常重要。
人为了生理上对自己定位,我们的视觉系统通常被用来帮助身体感觉环境,耳朵提供了关于我们周围环境的重要信息,味觉也同样提供周围信息。
音频在某角度来说比视觉更好,因为不受视觉范围的限制,而是对我们周围环境信息提供了360度的反馈。
为创建真实空间的沉浸感,理想情况下,我们希望可以利用我们的五官,且有全感觉加工处理(在一个环境中有效的使用我们的身体的过程)。问题在于当前阶段的VR开放,我们不可能使用全部的五官感觉。视觉和听觉做为了主要的因素,触觉不是很有效,味觉和气味完全没有用武之地。在这种情况下,听觉也许是我们可以开发的用来“影响”用户大脑的最强大的媒介了,创建一个完整的360度体验,提高空间沉浸,由于它是通过一个虚拟的源通过模拟声学来呈现一个现实的空间(这个在场景中或实际中不是必须的)
360度的体验创建空间沉浸
实现音频增强空间沉浸感的第一步是音频定位。从最近的研究(Skalski & Whitbred, 2010)中出现一个模式表明,在游戏中(环绕立体声)中,更好的音源位置对玩家空间沉浸感和享受的影响比视频质量(高清VS普清)要大的多。
大脑通过我们两只耳朵之间的响度,音调和时间的细微差别来定位声源在三维中的位置(水平,垂直和距离)。在虚拟现实中,玩家确实在场景中间,因此在模拟声音环境中决定声源位置的过程,对创建自然听觉体验音频改进是最重要的。
在媒体史的早起,我们发现人耳第一次双耳录音来拾取三维音频可追溯到1881年。
“双耳录制是一种使用两个麦克风录制声音的方法,旨在为演奏者或乐器的房间中的收听者创建三维立体声感觉。 这种效果通常使用称为“伪人头录音”的技术来创建,其中在人体模型头部每个耳朵中配备有麦克风。“(维基百科,”双耳录音“)
在游戏中,3D音频应该用实时处理的方法来创建,因为我们没有办法预期声音对象的硬广在某个位置,来匹配玩家位置和头部移动。因此在其被发明一个世纪后,现在双耳录音正在被重新使用,且工程师和投资者都正在努力开发适合于VR的最近双耳算法。
而实际上,由于需使用的立体声耳机而不是扬声器来复制3D定位(在VR中将玩家与外部世界隔离是必要的,并且对于视野范围,需要可以匹配相对于头/耳运动的音频回放)的这个特性 ,专业人员逻辑上愿意选择双耳作为3D音频处理的新标准,而不是通常的环绕技术(仅限于水平和距离音频定位)。
总结
在我们使用VR时,有许多音频事情需要挑战、考虑,且需求正在增长。通过进一步的探索,我们将会推动VR和游戏产业的边际。虽然游戏行业一直在提高最新一代优先级的画面质量,伴随这VR的迅速崛起,VR行业迅速的集中到来音频领域,因为VR社区意识到,更好的音频实现会大大增加玩家的享受和参与感,提高沉浸状态,最终提高存在感。
360度的音频定位只是VR开发带来的音频改进的一个直接结果。音频的处理工具也随着VR需求发展也不断发展,新技术及其在混合领域用于VR技术需求方面,以增强VR体验。
音频是行业探索和聚焦的下一个新媒介,VR肯定会让音频成为焦点!
原帖地址:
http://www.gamasutra.com/blogs/AlexRiviere/20161012/283142/Why_VR_will_put_Game_Audio_in_the_Spotlight.php
作者:Audiokinetic
本文同步发布与蛮牛:
http://www.manew.com/thread-96556-1-1.html
若有问题,请随时联系!!
VR中为什么需要把游戏音频放在聚光灯里?相关推荐
- 一、创建Assetbundle 在unity3d开发的游戏中,无论模型,音频,还是图片等,我们都做成Prefab,然后打包成Assetbundle,方便我们后面的使用,来达到资源的更新。
一.创建Assetbundle 在unity3d开发的游戏中,无论模型,音频,还是图片等,我们都做成Prefab,然后打包成Assetbundle,方便我们后面的使用,来达到资源的更新. 一个Asse ...
- Unity VR游戏开发干货教程:VR中的交互方式
原文:http://www.gameres.com/495107.html 在VR项目中,我们需要在用户"凝视"某个物体时将其激活.在VRSamples中,我们构建了一个简单的,可 ...
- 想在VR中体验暴雪爸爸的游戏,还得再等等
暴雪总监表示近期不会推出VR游戏,对VR持观望态度. 游戏大厂对于VR游戏的态度一直很模糊,在今年六月份的E3上,有些说好了要发布VR游戏的公司,大半年过去现在没有图像也没有声音.最近,动视暴雪倒是明 ...
- CS-REPORTERS公司旗下游戏品牌Gugenka from CS-REPORTERS.INC今天宣布将于2017年5月26日发售手机用VR游戏《在VR中与雷姆的异世界生活~膝枕篇陪睡篇(原名:
CS-REPORTERS公司旗下游戏品牌Gugenka from CS-REPORTERS.INC今天宣布将于2017年5月26日发售手机用VR游戏<在VR中与雷姆的异世界生活-膝枕篇& ...
- VR中多模式异步协作的挑战和设计考虑因素
VR中多模式异步协作的挑战和设计考虑因素 原作者: KEVIN CHOW, University of British Columbia, Canada CAITLIN COYIUTO, Univer ...
- VR中的9轴传感器(重力加速度/陀螺仪/磁力计)
ref:https://blog.csdn.net/dabenxiong666/article/details/53836503 前言 传感器的调试过程,一般根据原厂提供demo代码,调试数据接口,将 ...
- 索尼:声控将在VR中发挥大作用
(52VR开发网2017年5月17日讯)索尼的Richard Marks作为PlayStation VR(PSVR)头显的最早开发人员之一,并为公司的无数其他外围设备做了大量工作,对于未来的科技知之甚 ...
- 扫描自己进入VR中 SLAM Scan 3D引擎将做到
扫描自己进入VR中 SLAM Scan 3D引擎将做到 2016-03-22 10:58:09我要纠错 把17173装进手机神评论0 只需要点击拍照就可以将你的脸上传到虚拟现实世界中 瑞士软件初创公司 ...
- html支持的语音文件格式,html5中如何设置audio支持音频格式
html5中如何设置audio支持音频格式 发布时间:2020-04-15 10:24:37 来源:亿速云 阅读:367 作者:小新 今天小编给大家分享的是html5中如何设置audio支持音频格式, ...
最新文章
- 第一个以自己语言描述GBDT算法
- aliyun redis 链接超时_用redis做异步队列,原来还可以这样
- 电脑登陆不了网页的服务器地址,电脑登陆qq打不开网页怎么设置
- 在Spring MVC Web应用程序中添加社交登录:单元测试
- python宏替换_简单的宏替换
- ApacheCN 学习资源汇总 2019.3 1
- 从零开始学php 光盘,从零开始学PHP(第2版)(含DVD光盘1张)
- HDU 5510---Bazinga(指针模拟)
- 如何安装老版本Eclipse汉化——以2020-06为例
- linux pe系统下载,WINPE LINUX DOS 完美者U盘维护系统V8.1 正式版
- JQuery Ajax 参数含有特殊字符
- python如何调整word表格宽度_怎么批量修改Word表格的宽度
- PTA L2-048 寻宝图 (25 分)
- Linux 命令 | 常用命令之 cut
- 008.环形链表 II-双指针
- 自定义注解+切面处理+全局异常处理
- 混凝土与水泥制品行业运行分析
- SpringBoot 异步接口
- MDI窗体(多文档界面)
- Catalan 数之Python演示