Insider Insider
3dnchu 尚无浏览 2 分钟阅读

Editable Dance GEneration (EDGE) – 可根据音乐生成用于人形3D模型的舞蹈动画的AI模型!由斯坦福大学开发!

斯坦福大学发布了可根据音乐为人形3D模型生成舞蹈动画的AI模型“Editable Dance GEneration (EDGE)”。

Editable Dance GEneration (EDGE)

AI会分析音乐的节奏和情感,创建出物理上也更加合理、如同真正舞者能够表演出来的真实舞蹈。

斯坦福大学的研究人员开发了一种生成式 AI 模型,可为任何音乐编排人类舞蹈动画。它被称为 Editable Dance GEneration (EDGE)。

“EDGE 表明,具备 AI 的角色能够为舞蹈动画带来前所未有水平的音乐性与艺术性。”她在自己的实验室中表示。
研究人员认为,这一工具可以帮助编舞者设计序列,并通过可视化 3D 舞蹈序列,将想法传达给现场舞者。该程序高级功能的关键在于编辑能力。Liu 认为,借助 EDGE,动画师可以直观地编辑舞蹈动作的任意部分,从而创建计算机动画舞蹈序列。
例如,动画师可以设计角色某条腿的特定动作,而 EDGE 会从该位置起,以真实、无缝且在物理上也合理的方式将整个身体“自动补全”。人类可以完成动作。最重要的是,这些动作与动画师所选音乐保持一致。
与图像和文本等其他生成模型(如 ChatGPT 和 DALL-E)类似,EDGE 是用于编舞创意生成和动作规划的新工具。可编辑意味着,舞蹈艺术家和编舞师可以在精确的时刻添加特定姿势,并逐步、逐动作、逐位置地反复改进序列。EDGE 会将额外细节自动整合到序列中。未来不久,EDGE 还将允许用户输入自己的音乐,或在摄像机前演示动作。

https://hai.stanford.edu/news/ai-powered-edge-dance-animator-applies-generative-ai-choreography

哇,又出现了有趣的东西。
仅仅是能让自己的角色轻松随着喜欢的歌曲跳舞,就已经让人很兴奋了。

在本文发布时,Demo 还没有公开。是不是会配合 6 月 18 日举行的 CVPR 2023 一起发布呢?GitHub 上已经公开了代码。
详细内容请务必查看官方网站!

链接

EDGE: Editable Dance Generation from Music

Screenshot of edge-dance.github.io

AI-powered EDGE Dance Animator Applies Generative AI to Choreography

Screenshot of hai.stanford.edu

AI 能编排下一个 TikTok 舞蹈热潮吗?斯坦福研究人员创建了一个名为 EDGE 的模型,它可以为任何音乐编排人类舞蹈动画——为创意表达和身体参与开启新的可能性。 https://t.co/W0JpnqO3mT pic.twitter.com/CAKrqZqWGp

— Stanford HAI (@StanfordHAI) April 26, 2023