研究:多模态3D融合管道可增强情景感知AR体验
加州大学团队的研究集中在虚拟与物理世界的无缝集成,利用多模态融合管道将3D场景的几何、语义和语言信息结合,推动AR技术的情景感知能力。他们提出了一种新型的多模态3D对象表示,使得可以通过自然语言与物理环境进行交互。研究还引入了“原位”机器学习,以便在物理空间中变更和识别对象,证明了其在智能库存管理等应用中的实用性。这一进展有望增强AR界面的直观性,提高用户与物理空间的互动体验。
Insider
nweon 文章