谷歌发布MediaPipe Holistic,优化人体姿态、面部和手部
谷歌宣布发布了名为MediaPipe Holistic的开源框架,可以实时、同步地感知人体姿态和面部特征,并进行手部追踪。这个框架能够用于健身和运动分析、手势控制和手语识别、增强现实等应用。MediaPipe Holistic由优化的姿态、面部和手部组件组成,可以实现540多个关键点的拓扑结构,且在移动设备上实现接近实时的性能。此外,为了提高性能,框架采用了多阶段管道和轻量级的重裁剪模型。MediaPipe Holistic的应用包括肢体语言的整体和同步感知、远程手势界面以及基于全身的增强现实和运动分析。为了促进机器学习在Web开发者社区中的采用,谷歌还提供了适用于Python和JavaScript的解决方案。谷歌表示,希望MediaPipe Holistic能够激励开发者构建新的独特应用,并为未来研究开辟道路。