Facebook开源3D重建数据集:Common Objects in 3D
Facebook AI最近发布了一个名为Common Objects in 3D (CO3D)的大规模数据集,旨在帮助解决AR/VR中的3D重建问题。这个数据集包含了带有3D注释的常见对象类别的真实视频,涵盖了MS-COCO数据集中的50个类别。研究人员通过消费者智能手机拍摄的众包视频收集了近19000个视频,提供了150万帧的数据。为了使数据集更加准确,研究人员还使用了摄影测量方法和半自动主动学习算法进行了过滤和处理。此外,Facebook AI团队还提出了一种新的深层架构NeRFormer,可以通过观察视频来学习对象类别的几何结构,并通过预测辐射场来合成新视图。CO3D数据集对于推动现实生活中3D对象重建的研究以及实现完全沉浸式AR/VR效果具有重要意义。数据集已经在GitHub上发布,并成为评估和测试隐式形状模型重建方法的标准平台之一。