虽然听声辨位听起来有些玄乎,但却是射击类游戏中一项重要技能。玩家可以通过听游戏中的声音来判断敌人位置与状态,从而获得先发制人的优势。脚步声、枪声和载具声等都可以用来判断敌人的位置和状态,以脚步声为例:
如果听到地板上的走动声,敌人很可能躲藏在房屋中,玩家可趴伏在楼梯口或内置的房间中进行埋伏;如果听到草地上的走动声,为了防止被敌人从后方偷袭,不要在决赛圈中心处移动,尽可能贴着安全区边缘潜藏。
不同于视觉信息受到的高度关注,声音信息是容易被忽视的关键因素
以最简单的游戏《跳一跳》为例,音效的开关状态对于游戏体验是完全不同的。小人蹲下来会发出“嘟嘟”的声音,而“嘟嘟”的声音长短决定了小人可跳跃的距离。有人就根据小人蹲下来的“嘟嘟”声音长短来计算两个盒子之间的距离。
事实也证明,打开游戏音效玩《跳一跳》得到的分数会更高
游戏音效不仅仅是提供给玩家信息方便游戏顺利进行,其最终目标是提升用户的游戏体验,增加游戏沉浸感。对于游戏沉浸感的定义方面Patrick (2000)将沉浸感体验定义成“一个人处于一个和现实世界隔离的地方”;Jon Dovey和Helen W.Kennedy(2006)也提出了一个类似的定义“感觉失去了在现实中的感觉而全神贯注于一种冥思的环境”。
背景声作为游戏音效的一种,也是增强游戏沉浸感的关键之一。《第五人格》中同名BGM《第五人格》,是登录游戏的背景音乐,恐怖之余带着一点暗暗的悲伤,将玩家很好地带入到这个游戏的故事中去。侦探寻找线索的BGM《庄园》,监管者追击的BGM《威慑》、求生者被追击的BGM《梦魇》等都有很强的代入感。
在游戏中,游戏用户是主动的参与游戏而不是被动体验。因此游戏声音是以游戏用户为中心,必须时刻随着游戏用户的行动的变化而变化,要让游戏用户时刻感受到他们的参与互动性,听声辨位便是实例。游戏用户通过对于音效的定位很快找到敌人的位置,这一点与现实世界相同。
定位主要依靠的是3D音效技术。3D音效就是用扬声器仿造出似乎存在但是虚构的声音。例如扬声器仿造头顶上有一架飞机从左至右飞过,你闭上眼睛听,就会感觉到头顶真的有一架飞机从左至右飞过,这就是3D音效。
VR游戏音效与传统意义上的游戏音效相比,需要增强沉浸感。而3D音效将大大补足虚拟现实领域的听觉短板,提升沉浸感。纵观全球VR行业发展脉络,虚拟现实与3D音效融合发展是大趋势。
Google于2014年推出的Cardboard,定位是“人人都能用上虚拟现实”的入门级产品。简单地将其拼装后,即可将手机插入其中观看 VR 内容。虽然Cardboard的用户体验并不是很好,但仍可看出Google对于VR还是十分重视的。Google还成立了单独的VR部门,专注于VR技术的开发。而对于3D音效,Google已然将其视为VR生态系统的一个重要组成部分。
Google从2016年1月就开始为Cardboard SDK提供空间音频技术,在同年5月份就把音频渲染引擎迁移到了Daydream VR SDK。基于之前在移动VR、网页VR领域的探索,Google在2017年11月发布了Resonance Audio 3D音效工具,可以将各种设备上的音效转换为3D音效。
NVIDIA在2016年5月发布全球第一个实时物理模型的声学仿真技术——VRWorks Audio。其借鉴了光线追踪渲染的思路,充分考虑了3D场景的渲染,通过将音频交互映射到3D场景中的物体上,为应用带来真正的沉浸式音频。

2019年3月,NVIDIA发布了VRWorks Audio 2.0。相比于1.0来说2.0的性能显著提升,可以帮助运行更复杂的专业声学仿真,从而实现更高的精度,或者轻松运行不太复杂的游戏声学仿真,从而为更复杂的图形应用释放资源。
著名音频厂商森海塞尔在2016年1月就拿出了Ambeo解决方案。Ambeo 3D是森海塞尔将多年的研究和计划整合在一起的成果,它可以把2声道录音转变成5.1声道的环绕音效,利用独特的技术让听众能够感受身临其境的3D音场效果。
2019年7月,森海塞尔收购了Dear Reality GmbH多数股权。Dear Reality GmbH是一家专注于空间VR/AR音频算法的德国公司,此前森海塞尔就与Dear Reality合作研究VR的Ambisonics一体化解决方案。通过AMBEO,森海塞尔正积极参与沉浸式音频制作的各个领域。音频软件是这个生产链中的重要组成部分,特别是在VR/AR应用方面。这也是森海塞尔收购Dear Reality GmbH最主要的原因。
随着5G的发展,越来越多企业投入到VR市场的竞争中,VR也会迎来真正爆发。音频是我们感知世界的关键部分,在虚拟现实中同视觉信息一样重要,因此在时代的推动下,音频技术必将发展的越来越好。
-
Ekman I. Meaningful Noise: Understanding Sound Effects in Computer Games[C]// Proceedings of the 2005 conference on Digital Arts & Culture. 2005.
-
金晶. 游戏声音设计特征与听觉沉浸感研究[D]. 南京艺术学院.
-
https://baike.baidu.com/item/3D音效/10150691?fr=aladdin
-
https://www.theverge.com/2017/11/6/16614348/google-resonance-audio-3d-sound-vr-ar
-
https://baijiahao.baidu.com/s?id=1583377365436610721&wfr=spider&for=pc
-
https://developer.nvidia.com/vrworks
-
https://en-us.sennheiser.com/about-us-our-company-our-history
首届智能耳机声学工程师培训课程(二期)正在火热招生中......
权威的课程,精彩的内容,专业的导师,让您快速成为智能耳机领域的专业人才!

这里是声学楼
微信公众号acousticsblock
