去年,Facebook宣布推出Surround 360,一款可以拍摄3D图像的360°全景相机。但它并没有对外出售。反而进行开源,被用来作为其他开发者创建3D 360内容的参考设计,但毫无疑问,,surround 360 方案没有能够提供完整的VR体验。这就是为什么Facebook在今年的F8开发者大会上推出两款360度全景相机x24和x6的原因。

x24能在24个镜头的每一目的每个像素上捕获到完整的RGB和深度信息。x24的深度估计算法通过在360度的每个点进行四次过采样,产生一流的图像质量和全分辨率和6自由度点云,从而在故事讲解中解锁了新的维度。(x6使用六个摄像头三次过采样。)

Facebook再发两款VR全景相机,可6自由度拍摄
  有六个自由度拍摄的视频的另一个奇妙之处在于每个像素都有深度。每个像素都是3D。这是VR内容创作者的突破,它开启了视觉效果编辑的可能性。这意味着您可以将3D效果添加到实时动画片段。

我们知道传统全景相机拍摄内容只能在一个固定的点上环视观看,沉浸体验差。但对六自由度VR全景内容来说,这不再是一个问题。你可以把你的头移动到相机从来没有出现过的位置,并且仍然环看世界,好像你真的在那里。相机可以从不同的角度重建视图的外观。这可以让你随意浏览360度视频,就像在VR空间中漫步一样。

x24和x6的深度估计技术为我们提供了视频中每个帧的深度信息。相机的输出可以在现有VFX软件工具中直接支持实时视频。由于物体被三维捕获,计算机生成的图像可以无缝集成到由x24捕获的实时动作序列中。

创建x24和x6摄像机只是一个开始,facebook正在与视频生态系统中的一些最重要的伙伴合作,以更快的速度开发6自由度工作流程,从而尽可能快地为创作者带来全面的创意。据说这些改进的深度感测技术也为内容创作者提供了更加令人印象深刻的360度视频片段。例如,现有的视觉效果编辑工具将支持其所拍摄的视频内容。

Facebook再发两款VR全景相机,可6自由度拍摄
  事实上,这也是为什么Facebook会与许多后期制作公司(如Adobe,Foundry和Otoy)合作,以便利用这些相机开发编辑工作流程,从而建立一个新型的360摄像机生态系统。帮助VR内容团队创建身临其境的VR内容体验。

产品经理Homin Lee和Chetan Gupta在博客中继续透露 :Facebook使用多维数据集映射,而不是拼接,这是对比传统方法创建360度图像的一大优势。

Facebook还透露,通过使用深度智能学习技术,它分别提升了平台上360度视频的有效解决方案,将流量分别提高到非VR和VR设备的51%和59%。这些AI技术可以预测观众在视频中大部分内容的焦点,或者最感兴趣的地方,将大部分渲染像素投入到这些区域和正确的时间,从而提高有效的分辨率。

Facebook再发两款VR全景相机,可6自由度拍摄
  据悉,Facebook不会直接销售新的Surround 360摄像机,而是对合作伙伴进行战略许可。想要获得许可需要拥有成熟的VR作品以及一定的内容影响力,对于目前大多数内容创作者来说,使用诸如TECHE全景这样的专业设备拍出好内容,获得合作资格才是最需要考虑的事,facebook一定不会忽略中国市场,而在中国,全景设备很多,但TECHE全景相机无论画质还是稳定性都是内容团队的首选方案。可以预见,新一轮的x24名额之战将会愈演愈烈。当问到像这样的相机会不会出现在消费者层面的时候,Facebook表示这将会是今后需要考虑的事。CTO Mike Schroepfer说:“这是我们将要走的很长的一段路。