SIGGRAPH 2020演示视频
团队研发了一个低成本的装置来录制沉浸式光场视频。所述装置由46个安装在轻质亚克力圆顶的运动相机组成。利用由同一谷歌研究小组成员在2019年开发的机器学习算法DeepView，团队将来自每台相机的视频流组合成一个场景的3D表示。论文介绍了一种全新的“分层网格”表示，它由一系列具有半透明纹理的同心层组成。通过从后到前地渲染所述层，场景将能变得生动逼真。在以前，合成相机一开始未能捕获的视点是一个非常困难的问题，但谷歌团队的新方法解决了这一痛点，并允许用户在探索光场视频内容时自由地转动头部。
这项研究的另一个突破是数据压缩。谷歌团队希望开发出一个不仅能够重建视频并获得真正沉浸式AR/VR体验的系统，而且可以通过消费者AR/VR头显，甚至是Web浏览器访问体验。所述系统能够在压缩光场视频的同时保持原始的视觉质量，并使用传统的纹理贴图和广泛支持的视频编解码器来实现。可以说，他们已经成功地将下一代媒体格式从当今的图像和视频压缩技术中剥离出来。
布罗克斯顿指出：“用户将能够通过一个普遍的、快速的互联网连接来传输这种光场视频内容。克服这个问题将能把这项技术带向更广泛的受众。”
德贝维奇总结到：“对于完成这个项目，我们感觉我们已经克服了让虚拟体验变得真实、身临其境、可分发和舒适的主要障碍。我非常期待AR/VR创意社区利用这项技术创作的体验。”
