Meta专利探索为手机端投屏用户提供可交互的VR互动体验
电竞直播为观众提供了一种欣赏精彩比赛的方式,而在虚拟现实领域,行业也在探索类似的方式。Meta提出了一种名为"Dynamic mixed reality content in virtual reality"的专利申请,旨在解决移动计算设备用户在查看混合现实渲染内容和与虚拟现实环境交互方面的限制。该解决方案允许移动设备用户与混合现实渲染内容和虚拟现实环境进行动态交互,包括手机用户可以与虚拟现实头显用户在相同的虚拟体验中进行多人游戏。通过摄像头捕捉头显用户在现实世界中的图像,并将其渲染到移动设备中,然后通过移动设备与虚拟现实内容进行交互。此外,通过专门开发的分割算法,可以将用户的轮廓或身体分割并叠加到移动设备显示的虚拟现实环境中,实现动态混合现实内容的生成。该技术解决了允许移动设备动态移动,并在虚拟现实环境中保持用户图像的技术挑战。此专利申请于2021年6月提交,并已在2022年12月获得了公布。