Facebook现在使用AI和机器学习来创建没有任何深度图数据的3D照片

2020-06-09 17:38:26 来源: INeng财经

回到2018年Facebook的F8开发者大会上,该公司首次宣布了该平台的一项新功能,称为3D照片。顾名思义,该功能使您可以在Facebook News Feed中发布和查看三维照片。这些照片会像其他任何照片一样显示在新闻源中,但是当您滚动它们,轻按它们或倾斜设备时,3D照片的透视图就会改变。您也可以使用Oculus Go或Oculus Rift等虚拟现实耳机查看3D照片。在发布时,只有在您将深度图文件导入桌面并使用双摄手机(如最新的三星Galaxy或iPhone设备)的情况下,Facebook才允许用户创建3D照片。使用双摄像头的原因是Facebook可以根据从两个摄像头捕获的图像创建深度图。但是,现在,不再需要双摄像头才能在Android手机上创建3D照片。

根据该公司最近的博客文章,Facebook现在使用AI和机器学习来创建没有任何深度图数据的3D照片。正如 VentureBeat 解释的那样,该公司改进了机器学习算法,从而可以推断图像的3D结构而无需深度数据。此外,该功能现在也适用于自拍照,绘画和复杂场景。

为了实现这一壮举,Facebook使用了数百万对3D图像及其深度图来训练卷积神经网络。经过训练后,此神经网络现在可用于推断没有随附深度图的3D图像的外观。这种神经网络可以在几分之一秒内在典型的移动处理器上运行,使其适合3D照片功能。去年下半年,Google还启用了AR Core的深度API中的类似功能,该功能允许该平台使用单个摄像头创建深度图。

但是,即使有了新的改进,该功能也有一些限制。根据Engadget 对此事的报道 ,尽管现在任何设备都可以在新闻Feed中查看3D照片,但在Facebook应用中发布3D照片的功能仅限于iPhone 7和更高版本,以及一些“中档或更好的Android手机,包括三星的Galaxy Note 8和Note 9,以及整个Pixel系列(不包括预算友好的Pixel 3A)。伴随着这一新的发展,还值得注意的是,Facebook目前正在为您在新闻源上发布的照片测试图像编辑建议功能。

郑重声明:本文版权归原作者所有,转载文章仅为传播更多信息之目的,如作者信息标记有误,请第一时间联系我们修改或删除,多谢。