Nweon

上周，微软成为了第一家以MR+VR形式承办主题演讲的大型科技公司。他们成功地提供了一次无缝的沉浸式演示，这可能标志着VR营销宣传的未来。在过去的20年里，科技主题演讲已经从仓促的PowerPoint演示变成了重要的多媒体内容展示舞台。微软Ignite 2021开发者大会的开幕讲演采用了虚拟现实，这代表着微软朝科技主题讲演的未来迈出了一步。微软虽然不是第一家在VR进行讲演的公司，但他们是实现这一举措的最大型企业，这次讲演是最为雄心勃勃、最精雕细琢的一次，将沉浸式媒介和传统媒介结合在一起，并专门设计了针对在VR中浏览和通过非VR流式直播来触及更多观众的内容。微软在Altspace操持了整个讲演，通过Altspace将观众带入虚拟现实环境中。讲演还包括微软首席执行官萨蒂亚·纳德拉的视频讲话、HoloLens负责人艾利克斯·吉普曼的虚拟化身出演以及其他嘉宾的亮相。整个演讲以无缝流畅的体验令人惊叹。

谷歌将于2021年6月30日关闭其3D模型分享平台Google Poly，这给虚拟现实（VR）、增强现实（AR）和3D游戏开发者提供了大量免费的3D对象。然而，在这个时候，Sketchfab向Poly用户伸出了援手。Sketchfab发布了Poly-to-Sketchfab工具，与谷歌Poly团队合作构建，旨在帮助用户将托管在Poly上的3D文件转移到Sketchfab平台。用户可以通过关联自己的Poly和Sketchfab账户，并选择需要转移的内容，然后通过将资源上传到Sketchfab完成转移。然而，Tilt Brush和Tour Creator 360度文件不包括在支持范围内，但Tilt Brush本身提供了导出作品到Sketchfab的选项。此外，Sketchfab还提供了Download API，允许将Sketchfab搜索栏集成到应用程序中，并提供超过50万个免费的3D模型。

Epic Games宣布收购摄影测量工作室Capturing Reality，以改进其处理环境和对象的三维扫描方式。摄影测量技术可将多张照片或激光扫描拼接在一起，创建对象的三维模型，并导出为单一文件。随着计算机视觉技术的发展，设计师们越来越依赖摄影测量来快速创建真实感的三维资产。此次收购将使Epic Games在游戏开发中能够更轻松地创建高质量的照片级真实感资产。 被收购的Capturing Reality将继续独立运营，但相关功能已整合到Epic Games的Unreal引擎中。同时，Epic Games宣布降低Capturing Reality部分服务的定价，并表示将继续支持非游戏用例客户。 值得一提的是，Epic Games在2019年还收购了摄影测量库平台Quixel。通过这些收购，Epic Games努力巩固和扩展其Unreal开发引擎。

Facebook正在实验室里开发一种新型AR设备，它是一副轻巧时尚的眼镜，可以取代对PC或智能手机的需求。这种AR眼镜具备情境感知人工智能，可以帮助导航周围的世界，并提供丰富的三维虚拟信息。AR眼镜的设计目标是使用户不需要低头查看屏幕，能够将注意力留在面前的现实世界。 AR交互被描述为人类与计算机交互方式的一次彻底转变，与GUI的发明类似。为了实现全天候可穿戴的AR眼镜，需要一个能够实现低摩擦、随时可用且直观的界面。AR界面需要是主动式的，能够将意图无缝地转化为行动，使用户能够在现实世界中更多地发挥作用。 为了实现这种AR界面，Facebook的FRL Research团队集结了跨学科的研究科学家、工程师和神经科学家等，致力于解决AR交互问题。AR眼镜交互需要集成多种新技术，包括神经输入、手部追踪、手势识别、语音识别和情境化人工智能功能等。 然而，打造这种AR界面仍然面临挑战，需要解决舒适的全天候可穿戴形状和提供丰富触觉反馈的问题。为了真正以人为本，Facebook提出负责任的创新原则，并关注隐私和安全的需求。 最终，AR眼镜交互的目标是建立一个能够适配用户需求的界面，提供个性化的帮助和正确的选择。这将需要多年的研究和发展，但Facebook相信在未来十年内可以将这种AR界面推向市场。

AR和VR的一个重要区别是AR中始终可以看到现实和用户的双手，这意味着系统必须准确追踪手部与所有数字信息的位置关系，用户体验必须让对象和双手显得足够真实，用户必须能够像在物理现实中那样触摸和移动对象。 为了展示手势控制产品XR Skeleton的潜力和灵活性，Crunchfish发布了一个原型视频，展示了与虚拟对象和虚拟按钮的交互。该公司的手势控制产品XR Skeleton具有令人印象深刻的性能和功能，为在增强现实和虚拟现实环境中与数字对象进行高精度交互创造了条件。 通过识别手部的所有运动部分和轮廓，并将这些相关点连接到一个骨骼结构中，实现了在增强现实中的精确操作。最近公布的交互视频展示了如何利用骨架模型来捏取对象、改变大小和操作按钮。手势的灵活性是提升用户体验的重要细节，不管是用一根手指、两根手指，还是整只手来操作按钮，XR Skeleton都能实现出色的效果。

分析师郭明錤预测苹果将于2022年中推出MR/VR头显，并在2025年推出AR眼镜。据郭明錤透露，苹果的MR/VR头显将配备15个相机模组，其中8个用于影像穿透式的AR体验，6个用于生物辨识，1个用于环境侦测。据The Information报道，苹果的MR/VR头显将搭载6个传感摄像头和1个激光雷达。郭明錤还称，大立光将是15个相机镜头的主要供应商。关于苹果的AR/VR头显的命名，有些报道称其为"AR/MR头显"，并将其描述为在VR上实现MR功能的头显，类似于Oculus Quest和Pico Neo 2提供的影像穿透式MR体验。以上是关于苹果MR/VR头显的爆料信息。

瑞典的三名青少年创办的公司Stonx发布了一款名为"Cookie Body Tracking DK1"的全身VR追踪器，价格为600瑞典克朗（约合人民币456元）。该追踪器的价格比市场上其他同类设备要便宜。Stonx的创办者得到了非营利组织JA Sweden的支持，他们致力于为社区提供高性价比的VR追踪器。这款追踪器具有刷新率120Hz，精度小于1厘米，视场为85×55度，支持USB 2.0连接，并具有3-5毫秒的延迟。虽然精度不如HTC Vive追踪器准确，但比Kinect更优。目前这款追踪器处于DK1阶段，设计仍在完善中，随着代码的优化会不断改进。预购已经开始，价格为600瑞典克朗。未来还将推出360度版本，包括两个信标，可追踪所有角度。

苹果近日公布了一项名为“Transparent display system with peripheral illumination”的专利申请。该专利探索了一种高分辨率主显示器结合低分辨率外围显示器的解决方案，以改善AR/MR设备的视觉输出。该专利描述了一种头戴式设备的电子装置，其中显示系统具有透明的壳体构件和波导，可以将图像光从主显示器耦合到视窗，并在设备的外围边缘搭载了一个低分辨率的外围显示器。外围显示器可以发射出光并与真实世界的光合并，通过漫射照明来提供图像感知的连续性。这种布置可以避免计算机生成对象在移出中心时出现“拦腰折断”的情况，并提供了一种视觉错觉，使计算机生成对象进入用户的外围视觉。该专利的申请于2020年6月提交，并近日被美国专利商标局公布。

苹果公司近日公布了一项名为“提供镜面反射和反射修改的基于图像的表面检测”的专利申请。该专利主要针对混合现实（MR）用户佩戴头显或持握智能手机时，镜子和其他反射表面对用户体验的干扰进行了改进。该专利描述了一种检测反射表面的方法，通过增强或替换反射内容来改善用户的视觉体验。具体实施中，可以通过摄像头确定环境的视图，然后通过语义分析识别反射表面以及其反射特性。示例中，可以捕捉包含对象镜面反射的图像，并将其与直视图进行匹配，以检测镜面反射并匹配其形状、大小、颜色、纹理或运动。根据分析得到的反射特性，系统可以替换或修改显示的反射内容。该技术可用于将镜面反射中的智能手机替换为魔杖或光剑，并可对镜面反射中的头显进行删减和修改，最终呈现出完整的用户面容而不露出头显的痕迹。此外，也可以修改调整原被头显/智能手机遮挡的背景内容，以生成符合情景的背景。

据知名XR博主Ilja Z透露，Oculus计划在今年3月份向用户开放120Hz刷新率支持，但近期通过Twitter更新表示，Oculus将把时间表由3月更改为第二季度（Q2）实施。同样，Oculus对于实现这一功能的“信心”也由原本的“Medium（中）”调整为“Low（低）”，即对于在Q2季度为Quest 2引入120Hz刷新率支持并不太有信心。报道指出，尽管Quest 2的显示屏具备支持120Hz刷新率的能力，但考虑到设备的芯片和电池问题引起了一些性能和续航的担忧。此外，高刷新率模式的稳定性也需要进行评估。卡马克曾表示，目前只有少量的现有Quest游戏能够支持120Hz，因为为了充分利用高刷新率，应用程序本身需要能够以120帧每秒的速度运行，这对开发者来说是一项不小的任务。