Fraunhofer Institute for Integrated Circuits关于MPEG-I
MPEG-I 是为虚拟和增强现实应用程序开发的全新标准。它旨在创造自然、逼真的 VR 体验，并提供令人信服的整体体验——不仅适用于眼睛，还有耳朵。
想象一下在 VR 场景中中聆听一场音乐会，您不仅可以固定在一个座位上，还可以在音乐厅中自由移动，这将会是多么美妙的体验！还可以想象一下电子竞技或体育赛事的VR直播，用户可以在观看比赛的同时在体育场内走动。这便是MPEG-I标准的一个目标。
© Photo Fraunhofer IIS
MPEG-I
全新的解决方案
以前的解决方案可以从一个观察点在所谓的三自由度 (3DoF) 中获得视觉或听觉体验。相比之下，即将推出的 MPEG-I 标准将支持完整的六自由度 (6DoF)。借助 3DoF，用户可以自由移动头部并接收来自多方的输入。凭借 6DoF，用户可以在虚拟空间内移动。他们可以四处走动，探索每个视角，甚至与虚拟世界互动。增强现实 (AR) 的情况类似，其中用户可以在由虚拟元素扩展的现实世界中行动。例如，您可以在客厅内安排几位虚拟音乐家并欣赏属于您自己的个人音乐会。
所有这一切都需要复杂的技术来产生令人信服且高度沉浸的音频体验，并且需要考虑到声学的方方面面。一个例子是房间内和障碍物周围的声音传播。另一个是声源，它可以是静态的，也可以是运动的（后者产生多普勒效应）。它们应该具有真实的辐射模式和大小；例如，如果我们想听听沙滩上的海浪声，音频源则可以延伸到一公里或更远。目前，我们正在研究障碍物或房间角落周围声音衍射的复杂现象，以及如何有效地实时渲染。
下面的演示只是一个非常基本的渲染呈现，它还尚未充分发挥MPEG-I的技术潜力。然而，却给人们留下了非常不凡的第一印象，即该技术在未来的无限可能。请使用耳机收听。
开启未来
这一切都还需要一段时间才能成功实施。对于 3DoF 应用的标准化，我们可以通过 MPEG-H 实现，但要真正实现 6DoF 声音的沉浸式渲染，还需要许多其他技术开发。如果一切顺利，它应该会在 2025 年在终端设备上实现。 总的来说，我们希望为丰富的 VR 和 AR 内容开发一种长期稳定的格式，让用户可以使用 10 至 20 年。就像一个 mp3 文件，在基础标准最终确定 30 年后的今天仍然可以无缝播放一样，使用专用接收器和日常智能手机都可以进行 MPEG-I 格式的还放。因此，将 VR 和 AR 内容作为下一代视频服务通过现有分发渠道传输将变成可能。通过这种方式，供应商可以为用户提供真正令人兴奋和身临其境的娱乐节目、纪录片、教育或体育内容体验。