运动捕捉技术在视效行业中被广泛应用,但“Mo-cap”专家和开发人员Jasper Brekelmans的新项目旨在为动作捕捉表演提供实时增强现实预览,解锁在现实中实时叠加舞蹈预览的能力。
电影和电视中的视觉效果现在通常使用运动捕捉来数字化记录人类演员的动作。但开发人员Jasper Brekelmans正在尝试使用微软的增强现实头盔HoloLens,以使导演和演员能够实时在现实中看到这些数字表演叠加在现实中的效果。
上次我们报道Brekelmans时,他正在演示他如何使用HoloLens与Autodesk流行的MotionBuilder角色动画制作工作室进行AR集成。
Brekelmans现在和一个名为WholoDance项目的团体合作,该组织致力于数字化捕捉舞蹈艺术,用于文化和研究目的。与提供运动捕捉技术和设施的Motek Entertainment合作,Brekelmans成功地建立了一种无线传输运动捕捉数据的方法,并将这些数据无线传输到HoloLens头盔上,生成一个叠加在现实中的模仿舞者动作的增强现实人物角色 – 全部在3D空间中跟踪。
对于Brekelmans来说,这是他之前工作的自然演化。他使用这项技术将从台式电脑上运行的Autodesk MotionBuilder的数据实时传输到微软HoloLens上,使人们能够在运动捕捉舞台上实时可视化一个真人大小的3D角色。
Brekelmans说:“当我们把HoloLens交给舞者时,我们第一次注意到的是他们立刻陷入了迷醉的状态。”“紧接着,他们立刻开始分析自己的表演,就像专业运动员使用类似的分析设备一样。在观察生动的行走中的真人大小的3D角色时,他们更能清楚地看到平衡时髋部的微妙变动,以及脚部行走的样子,远远胜过在2D屏幕上观看同样的事物。”
Xbox控制器用于为用户提供各种控制,例如在物理空间中调整3D人物角色的偏移量,切换不同的可视化效果和调整视觉参数。由于需要大量的控制,团队选择使用“已知设备”,而不是依赖于HoloLens常用的凝视、空中点击和语音命令。
Brekelmans表示:“尽管HoloLens专门设计用于将全息影像投射到用户更远的地方,但我们确实尝试让表演者佩戴设备进行追踪。”“这将使他们能够在自己的手和脚上看到图形叠加。虽然显示技术还不太理想,但它确实为我们提供了进行实验和形成未来新想法的东西。”
那么,这种实验性技术将来可能会走向何方?“…我们希望能与其他设备玩耍,包括那些通过与台式机连接利用高端GPU的设备。并且在视觉效果背景下使用它,在工作室或甚至现场进行可视化三维角色、场景扩展等。”
0