Meta公司发布了新的视频生成AI模型“Movie Gen”!
Meta Movie Gen
由Meta的AI研究团队开发的Movie Gen,在各种功能上都带来了最先进的结果。我们对这条研究线的潜力感到兴奋,它将为从休闲创作者到创意专业人士开辟全新的可能性。
Movie Gen的模型和功能
- Movie Gen视频: 一种30B参数变换模型,可通过单个文本提示生成高质量且高精细的图像和视频。
- Movie Gen 音频: 一种13B参数的Transformer模型,可接受视频输入以及可选的控制文本提示,生成与视频同步的高保真音频。它可以生成环境音、器乐BGM和拟音,在音频质量、视频与音频对齐以及文本与音频对齐方面都能带来最先进的结果。
- 精确的视频编辑: 可将生成的视频或现有视频以及附带的文本指示作为输入,执行添加、删除、替换等局部编辑,以及背景或风格变更等全局编辑。
- 个性化视频: 以人物图像和文本指示作为输入,该模型能够生成在视频中保持角色一致性和自然动作方面具有最先进结果的视频。
这真厉害啊。是用Facebook之类的内容进行训练的吗?
顺带一提,很遗憾,这项技术目前还不能使用。很期待今后会如何发展。技术论文等也已公开。详细内容请查看官方网站。
链接
Meta Movie Gen