Meta公司于7月2日发布了可在1分钟内从文本生成3D模型的技术「Meta 3D Gen」!
Meta 3D Gen

介绍 Meta 3D Gen (3DGen)。这是一个用于从文本生成3D资产的最先进高速流程。3DGen 能在1分钟内创建具有高提示词忠实度、高质量3D形状和纹理的3D资产。它支持物理基础渲染(PBR),这是现实世界应用中3D资产重光照所必需的。此外,3DGen 还支持使用用户提供的额外文本输入,对先前生成的(或由艺术家创建的)3D形状进行生成式重纹理。3DGen 集成了我们分别为文本生成3D和文本生成纹理开发的主要技术组件 Meta 3D AssetGen 和 Meta 3D TextureGen。结合这些优势,3DGen 以三种方式同时表示3D对象:视图空间、体积空间和UV(或纹理)空间。通过将这两种技术整合,我们相较于单阶段模型实现了68%的胜率。我们将3DGen 与多个行业基线进行比较,展示了它在复杂文本提示的提示词忠实度和视觉质量方面超越这些基线,同时速度显著更快。
Meta3DGen 将 Meta 用于文本生成3D(Meta 3D AssetGen (Siddiqui et al., 2024))和文本生成纹理(Meta 3D TextureGen (Bensadoun et al., 2024))的基础模型统一到一个流程中,从而能够高效且最先进地创建和编辑具有PBR材质贴图的多样化、高质量纹理3D资产。

与现有技术(Meshy 和 Tripo)的比较

与现有技术(CSM、Tripo、Meshy、Rodin)的比较

这也很有意思。这个技术会如何发展呢?还是说这仍然只是中途阶段呢。
目前 PDF 论文数据可以下载。请务必查看!
链接
Meta 3D Gen | Research – AI at Meta