Fraunhofer展示VR情景喜剧《Vaudeville》

  VR(虚拟现实)从2014年闯入用户视野，在经过2015年与2016年的沉淀后，技术、硬件、内容以及用户都得到了发展。进入2017年后，移动VR成为热点之一，今年ChinaJoy展会期间HTC Vive宣布打造VR一体机产品。与此同时，微软打造的Windows MR体系也有多款产品将在今年上市。对于用户而言，价格在降低的VR头显似乎离自己越来越近了。不过在笔者看来，体验是VR发展中至关重要的一项。无论是VR头显的佩戴体验、视频的观赏体验还是游戏的交互体验，用户获得的感受、反馈将决定这个市场能否继续活跃下去。

  在2017年9月15日至19日举办的阿姆斯特丹IBC展会期间，Fraunhofer IIS携手b<>com技术研究所联合展示了基于国际沉浸式音频标准MPEG-H中HOA技术的端到端空间音频制作、传输、还放以及渲染系统。由法国VR工作室DVGroup制作的VR情景喜剧《Vaudeville》是首个基于此项标准打造的虚拟现实内容。据悉，在虚拟现实产业论坛(VRIF)准则草案的规范下，该内容成功传输至VR头戴设备。

  《Vaudeville》通过b<>com空间音频工具箱进行HOA格式的混音制作，并遵循基于由Fraunhofer IIS主导研发的MPEG-H 3D音频技术的VRIF 3D音频基本规范。从技术角度来讲，该3D音频基本规范是MPEG规定的全向媒体格式(OMAF)的一部分。用户可以通过三星Gear VR进行体验，感受“声临其境”的沉浸式体验。

  MPEG-H音频作为全面的音频编解码系统，能够传输通道式音频、ambisonics以及带有元数据的音频对象，帮助用户在创建互动式和沉浸式音频体验的过程中拥有最大的自由度。此前，MPEG-H电视音频系统已经成功在韩国的UHD广播电视网络中正式商用，它也是ATSC 3.0和 DVB-UHD电视标准的一部分，且适用于OTT内容。MPEG-H的先进性能包括一下三个方面：第一沉浸式声音，MPEG-H包含的3D音频组件能够带来沉浸式声音体验;第二互动式音频，用户可以根据自身需求调整混音比例;第三通用传输，MPEG-H能够在任何环境和设备上呈现最佳还放效果。

  为了让VR还放系统端的集成工作变得更加简单，Fraunhofer IIS为其提供了VR音频SDK，从而使其拥有解码MPEG-H 3D音频的能力以及最佳的音频渲染效果，进而打造优质的VR体验。而b<>com空间音频工具箱则是全球顶尖的HOA音频前期和后期制作解决方案。

  b<>com超媒体领域负责人 Ludovic Noblet表示：“HOA(基于场景的音频)格式是打造身临其境的VR体验的关键所在。能够与DVGroup和Fraunhofer强强联手，并向公众首次展示遵循VRIF准则草案的端到端生态系统及内容，我深感荣幸。”

  Fraunhofer USA数字媒体技术新媒体业务高级总监，Jan Nordmann表示：“与b<>com合作开发基于MPEG-H音频的端到端VR音频系统是一个非常好的集体创新案例。更重要的是，DVGroup能够通过该系统成功将其作品的沉浸体验带入一个前所未有的新高度。”

  DVGroup的François Klein表示：“我们鼓励作者使用空间音频技术来诠释他们的故事。本次关于《Vaudeville》的合作旨在将360度3D体验提升至业界顶尖水平，而b<>com开发的空间音频工具很好地提供了日常360-VR内容中普遍欠缺的空间感。得益于Fraunhofer的支持，我们终于能够为用户带来真正的沉浸式音频体验。”