Fraunhofer upHear空间音频技术让VR更真实

  VR体验的最大魅力就在于沉浸感，让体验者相信自己正身处“另一个世界”。不过想要“欺骗”用户也不是件容易的事儿，除了在视觉体验方面多做功课外，甚至还需要提供听觉、触觉方面的反馈。在视觉、听觉、触觉三个方面，最受硬件厂商重视的自然是视觉，其次是触觉，只是没有谁能够完全忽视听觉得重要性，毕竟无论游戏还是视频在渲染气氛时，听觉必不可少。

  2017年4月24日，音频及媒体技术研究机构Fraunhofer IIS宣布，Felix & Paul Studios工作室将在其下一代360度摄像头系统中选用Fraunhofer空间音频麦克风信号处理技术。

  Fraunhofer空间音频麦克风信号处理SDK的设计初衷旨在简化录制高质量空间音频内容的过程。该项自动处理算法是Fraunhofer沉浸式音频创新品牌upHear旗下的首个音频技术。而Felix & Paul Studios也是将该项技术整合并集成于虚拟现实摄像头系统中的首位合作伙伴。

  Felix & Paul Studios首席技术官和创新合作伙伴Sebastian Sylwan表示：“作为全球唯一的全频谱VR工作室，我们致力于创造身临其境的沉浸式VR体验，而声音在其中扮演着至关重要的角色。能够与全球领先的数字音频技术缔造者Fraunhofer合作，并将其upHear空间音频麦克风信号处理技术成功集成于我们下一代摄像头系统中，我们深感荣幸。两项技术的完美结合能够实现精准且完整的空间场景捕获，且不会提高电影拍摄成本。”

  Fraunhofer美国数字媒体科技公司新媒体部门业务拓展高级总监Jan Nordmann表示：“我们的upHear空间音频麦克风处理技术能够帮助Felix & Paul Studios通过简单的空间音频录制方式显著增强其沉浸式VR内容效果。非常高兴能看到我们的创新技术为内容创造者服务。此外，能够与领先的电影VR工作室合作，并为他们的下一代摄像头系统带来增强型声音录制技术我们深感荣幸。 ”

  Fraunhofer空间音频麦克风处理技术专门为专业和消费级360度摄像头以及移动设备而设计，通过设备的内置麦克风提升声音捕捉能力。该算法能够实现将收录的音频信号自动实时转换成任何环绕声及沉浸声还放格式，其中包括：FOA、HOA、7.1+4个高度声道的沉浸式3D音频以及当今系统常用的5.1环绕声。同时，保留音频场景的真实听觉效果。其灵活的语义信号分析方法，允许采用三个或者更多的麦克风组件以实现各种配置，并且支持更为复杂的麦克风阵列，例如在Felix & Paul Studios摄像头中的应用。

  Felix & Paul Studios音频部门负责人以及子工作室Headspace Studios总监Jean-Pascal Beaudoin表示：“Fraunhofer的音频技术能够帮助我们精准地录制基于场景的音频，并在后期制作中将其与其他音频素材结合，从而带来真正的沉浸式音频体验。”