Facebook、Google和GoPro都旨在使VR更加身临其境,配备新的相机,其中一些在可预见的将来,不会被商业化销售。然而,Adobe的研究人员相信,您可能不需要新的摄像头硬件来实现沉浸式的巨大飞跃。
Adobe的研究负责人Gavin Miller将在本周二在拉斯维加斯的NAB上推出新的尖端技术,有时候可以将平板,单视角360度视频拍摄到消费级球面摄像机,完全融入VR视频,完全具备融入视频的能力——业内人士称之为六自由度(6DoF)。
提供六自由度的单视角360度视频和虚拟现实体验的差异对于高端VR眼镜(如Oculus Rift和HTC Vive)的用户尤其重要。这些眼镜提供房间跟踪,这意味着眼镜知道观众在房间中的哪个位置,将诸如“向前倾斜”的动作准确地翻译成相应的视觉效果。
通过计算机生成的图像,这样做相当容易,但是要让观看者在录制视频中实际自由移动,需要前沿的图像捕获技术。例如,像Lytro开发的照相机系统,可能花费数十万美元。
然而,Adobe的科学家已经找出了一种方法,通过分析相机称为“运动结构”算法的运动,来扣除关于房间的关键信息。该数据可用于产生新的视角来解决不同的观点,为观众提供真正融入以前甚至不是3D视频的能力。该技术还可用于稳定360度视频,或生成不同版本的视频,为不同程度的运动舒适度的用户提供服务。
这种方法有一个缺陷:将360度视频的六个自由度添加到相机,需要实际移动时才起作用。米勒解释说:“我们假设相机移动来推断深度。“如果相机旋转但不能一边移动,我们无法计算深度,但可以使旋转稳定。
尽管如此,该方法证明,搭建复杂摄像机并不是VR视频进步的唯一解决方案。计算机视觉算法同样重要,米勒甚至认为昂贵的摄像机硬件可能根本不需要产生完整的身临其境的VR视频。
米勒将在星期二在NAB上介绍一下关于下一代图像制作的小组研究,该小组还介绍了Light Field Lab CEO Jon Karafin谈论下一代全息显示技术,
米勒还将谈论使用深度学习来替换图像中的天空与不同的图像,以及视觉搜索。所有这些项目都是Adobe高级研究的一部分,并不一定会成为该公司的产品之一。然而,很容易看出,至少有一些技术可以在Adobe的编辑工具中找到方法,特别是当公司正在寻找其在虚拟现实生产和货币化中的作用时。
热门跟贴