专栏名称: MEMS
中国首家MEMS咨询服务平台——麦姆斯咨询(MEMS Consulting)
目录
51好读  ›  专栏  ›  MEMS

以先进算法为VR装置提供身历其境3D声音体验

MEMS  · 公众号  ·  · 2017-07-16 06:00

正文


目前无论是需要与PC连结或是结合智能手机的VR头戴式装置,声音的来源主要是透过耳罩式耳机(外接或是装置内建),但是双声道的耳机在声音方向性的表现上,远不如可支持5.1甚至7.1声道的家庭剧院音响,在进行VR游戏或虚拟场景体验时的效果也会因此大打折扣。

为此来自以色列的音讯技术开发商威富思(Waves),以独家的算法结合Cadence的Tensilica数字讯号处理器(DSP) IP,能让双声道耳机呈现5.1或7.1声道的3D音响效果,而且还能支持头部追踪,在VR场景中无论使用者往哪一个方向转动头部位置,仍能以精确清晰的方式呈现声音的来源方向,让游戏体验更具临场感。

Waves亚太区行销总监王家乐表示,该公司在音讯技术领域已经有25年的经验,一开始都是以专业录音室设备业者合作,还曾获颁美国乐坛的权威奖项葛莱美奖(Grammy Award);后来将触角延伸向大众市场,除了推出适合PC、手机与穿戴式装置等各种消费性电子设备的音讯强化解决方案,并与台湾音讯IC设计大厂瑞昱(Realtek)合作,锁定VR应用发表内建Waves Nx技术的WNX7000晶片,能让耳机制造商开发为VR使用者带来沉浸式声音体验的产品。

王家乐指出,基于在专业音讯领域累积多年的技术经验,Waves对于声音表现的品质与精准度特别敏感;目前VR装置的使用者在耳罩式耳机所获得的声音体验,缺乏像是在聆听现场演奏音乐那样的开阔空间效果与方向感,这在单纯听音乐的时候或许感受不深,但在VR场景中,若声音的指向性表现不佳,「身历其境」的效果也会因此逊色。Waves Nx技术透过头部位置的追踪进行音讯处理,能在使用者周围的虚拟听觉空间中定位声音来源,使得所体验的VR世界感觉更接近现实世界。

VR在近两年来随着平价头戴式装置以及多样化游戏或视讯内容的陆续问世,成为越来越亲近消费大众的娱乐体验;当最初的新鲜感逐渐消退,使用者对于VR装置的视觉与听觉效果就会有更进一步的要求。不过摊开各种VR头戴式装置的技术规格,大多数厂商似乎更着重于视觉效果的提升,同样对VR体验有着关键性影响力的听觉效果相对较被忽略;因此在更高的显示解析度之外,预期更高品质的音讯处理技术将会是VR产品的下一个竞争焦点。

延伸阅读:


《HTC Vive虚拟现实(VR)头戴式显示器》


《微软HoloLens拆解分析》