Quest Movement SDK通过IK反向运动学为Avatar提供全身效果
Meta于10月26日发布的Movement SDK包含眼动追踪和面部追踪功能,可为应用程序带来逼真的Avatar,并包括基于机器学习和IK反向运动学的下半身追踪功能。头显内置有五个指向面部的红外传感器,可以进行面部追踪,由机器学习模型驱动,可以检测各种面部运动。Movement SDK输出的抽象面部运动数据基于面部动作编码系统(FACS),可以保留用户原始动作的语义含义。此外,Movement SDK还包括Body Tracking API,根据控制器或手相对于头显的位置使用三点追踪,利用IK反向运动学和机器学习进行全身姿势估计。Body Tracking API可以同时适用于使用控制器或裸手的情况,提供完整的模拟上身骨骼,并可自动处理从控制器到裸手的切换。Movement SDK现已可用,开发者可以立即构建应用程序利用其中的新功能。