Fraunhofer和b<>com联合展示基于VRIF准则草案并运用MPEG-H空间音频解决方案的VR喜剧《Vaudeville》

/

2017年9月14日,德国埃朗根/法国雷恩/荷兰阿姆斯特丹——在2017年IBC期间,世界知名的音频及媒体技术研究机构Fraunhofer IIS与法国超媒体创新机构b<>com技术研究所联合展示了基于国际沉浸式音频标准MPEG-H中HOA技术的端到端空间音频制作、传输、还放以及渲染系统。由整套工具生产的首个虚拟现实内容是由法国VR工作室DVGroup制作的VR情景喜剧《Vaudeville》。在虚拟现实产业论坛(VRIF)准则草案的规范下,该内容成功传输至VR头戴设备

VRIF致力于实现高质量虚拟现实内容的生产和交付,同时十分重视其在开放生态系统中的互操作性。虽然VRIF不是一个标准开发组织,但其成员倡导为高质量的视听虚拟现实服务创建一个可互操作的端到端生态系统。在2017年IBC期间,VRIF将发布VR准则草案,而Fraunhofer IIS和b<>com则将联合展示第一个基于该准则草案的虚拟现实内容。草案链接:http://www.vr-if.org/guidelines/

 

在IBC期间展示的虚拟现实内容通过三星Gear VR头戴设备呈现,并为观众带来身临其境的娱乐体验。该内容通过b<>com空间音频工具箱进行HOA格式的混音制作,并遵循基于由Fraunhofer IIS主导研发的MPEG-H 3D音频技术的VRIF 3D音频基本规范。从技术角度来讲,该3D音频基本规范是MPEG规定的全向媒体格式(OMAF)的一部分。

 

MPEG-H音频是一个真正全面的音频编解码系统,它能够传输通道式音频、ambisonics以及带有元数据的音频对象,并使用户在创建互动式和沉浸式音频体验的过程中拥有最大的自由度。目前,MPEG-H电视音频系统已经成功在韩国的UHD广播电视网络中正式商用,它也是ATSC 3.0和 DVB-UHD电视标准的一部分,且适用于OTT内容。MPEG-H的先进性能包括:

·       沉浸式声音:MPEG-H包含的3D音频组件能够带来沉浸式声音体验。

·       互动式音频:用户可以根据自身需求调整混音比例

·       通用传输:MPEG-H能够在任何环境和设备上呈现最佳还放效果

 

为了让VR还放系统端的集成工作变得更加简单,Fraunhofer IIS为其提供了VR音频SDK,从而使其拥有解码MPEG-H 3D音频的能力以及最佳的音频渲染效果,进而打造优质的VR体验。而b<>com空间音频工具箱则是全球顶尖的HOA音频前期和后期制作解决方案。

 

b<>com超媒体领域负责人 Ludovic Noblet表示:“HOA(基于场景的音频)格式是打造身临其境的VR体验的关键所在。能够与DVGroup和Fraunhofer强强联手,并向公众首次展示遵循VRIF准则草案的端到端生态系统及内容,我深感荣幸。”

 

Fraunhofer USA数字媒体技术新媒体业务高级总监,Jan Nordmann表示:“与b<>com合作开发基于MPEG-H音频的端到端VR音频系统是一个非常好的集体创新案例。更重要的是,DVGroup能够通过该系统成功将其作品的沉浸体验带入一个前所未有的新高度。”

 

DVGroup的François Klein表示:“我们鼓励作者使用空间音频技术来诠释他们的故事。本次关于《Vaudeville》的合作旨在将360度3D体验提升至业界顶尖水平,而b<>com开发的空间音频工具很好地提供了日常360-VR内容中普遍欠缺的空间感。得益于Fraunhofer的支持,我们终于能够为用户带来真正的沉浸式音频体验。”

 

在2017年9月15日至19日举办的阿姆斯特丹IBC展会期间,与会观众能够在8号馆G14的b<>com展位和8号馆B80的Fraunhofer展位体验带有MPEG-H沉浸式音频效果的《Vaudeville》 VR内容。

 

更多信息,欢迎访问:www.iis.fraunhofer.de/amm