苹果AR/VR专利针对“镜子反射”提出内容替换解决方案
苹果公司近日公布了一项名为“提供镜面反射和反射修改的基于图像的表面检测”的专利申请。该专利主要针对混合现实(MR)用户佩戴头显或持握智能手机时,镜子和其他反射表面对用户体验的干扰进行了改进。该专利描述了一种检测反射表面的方法,通过增强或替换反射内容来改善用户的视觉体验。具体实施中,可以通过摄像头确定环境的视图,然后通过语义分析识别反射表面以及其反射特性。示例中,可以捕捉包含对象镜面反射的图像,并将其与直视图进行匹配,以检测镜面反射并匹配其形状、大小、颜色、纹理或运动。根据分析得到的反射特性,系统可以替换或修改显示的反射内容。该技术可用于将镜面反射中的智能手机替换为魔杖或光剑,并可对镜面反射中的头显进行删减和修改,最终呈现出完整的用户面容而不露出头显的痕迹。此外,也可以修改调整原被头显/智能手机遮挡的背景内容,以生成符合情景的背景。