Nweon

苹果近日公布的专利申请中，提出了用于数字注释的设备、方法和图形用户界面，旨在解决增强现实技术中用户输入困难和体验不佳的问题。该方法可以减少用户输入的数量、范围和性质，提供更有效的人机界面，并节约电能和减少充电次数。在实施例中，计算机系统可以是笔记本电脑、平板电脑或手持式移动设备，具有触控板/触控式显示器、图形用户界面、处理器、存储器和用于执行多个功能的模块、程序或指令集。用户可以通过触控笔或手指与图形用户界面进行交互，功能包括图像编辑、绘图、文字处理和电子表格制作等。在该方法中，通过显示生成组件显示用户界面，并在显示视频的同时接收向视频添加注释的请求，还可以暂停视频播放并显示对应位置的静止图像，接收相应的注释并在视频播放区域中显示与视频第二位置对应的第二部分和注释。该专利申请名为“Devices, Methods, and Graphical User Interfaces for Depth-Based Annotation”，最初于2019年9月提交。

根据映维网的报道，未来的Apple Pencil可能会使用一种新的传感器，使用户能够在任何表面上进行操作，并将数据传输回iPad或Mac。苹果之前已经提交了多项关于Apple Pencil的专利发明，现在他们的团队开始关注触控笔作用的表面。当前的Apple Pencil需要触摸屏幕才能工作，但未来的Apple Pencil可能会更加独立。据称，这项专利可以使得Apple Pencil在任何表面上工作，只要检测到Apple Pencil接触或移动表面，就可以进行相关的数据传输，从而可以在任何位置使用。这意味着艺术家们不再局限于iPad小屏幕，而可以在完整的桌面上进行绘画，甚至可以直接在现有的图纸或蓝图上进行操作，或者直接对现实对象进行绘画并制作相关的3D图。然而，苹果并没有计划取代现有的触摸屏，而是通过这种方式改进Apple Pencil的功能，提高输入精度。这项名为"Content Creation Using Electronic Input Device On Non-Electronic Surfaces"的授权专利最初在2017年7月提交，并最近由美国专利商标局公布。

《半衰期：爱莉克斯》是一款受欢迎的PC VR游戏，以其身临其境的游戏玩法和精美画面而受到全球玩家的一致好评。移动机制是该游戏的核心功能之一，Valve在一期全新的幕后视频中详细介绍了游戏的移动机制。玩家可以选择三种移动方式：传送、瞬移和持续移动，以提升游戏的舒适度。这三种移动机制背后有着深入的思考和考量，Valve努力追求在VR世界中自由流畅地移动的同时注意现实世界的挑战。无论玩家身高高低，游戏都需要保持一致的游戏体验。《半衰期：爱莉克斯》是一款优秀的VR大作，提供了丰富精彩的体验，对于所有的VR玩家和游戏开发者来说都是不容错过的。

Facebook宣布推出了移动端的OpenXR SDK原型版本，允许开发者开始在移动设备上集成OpenXR功能。最新发布的OpenXR Mobile SDK 1.0.6为原型预览版，支持Oculus Quest原生应用程序的OpenXR API开发。使用OpenXR Mobile SDK可以简化为不同VR硬件平台进行开发的工作，减少移植的工作量。然而，Facebook建议开发者在OpenXR Mobile SDK退出开发者预览版之前不要在他们即将发布的Quest应用中支持相关API。Facebook和Oculus在制定OpenXR标准方面发挥了重要作用，并与其他平台方合作进行了长期而艰苦的工作。OpenXR是The Khronos Group开放标准，旨在帮助开发者开发支持多个平台的高性能VR应用程序，并简化沉浸式内容开发过程。

光感科技发布了一款名为feelarOS的多任务XR操作系统，该系统可安装在安卓手机上，并通过智能眼镜将手机App以超大悬浮屏的形式呈现在3D空间中，实现腾空点击交互。feelarOS重构了安卓操作系统，使用自主研发的三维引擎，实现了同一个App在手机和智能眼镜中的使用。该系统支持数百万安卓应用的3D化，解决了AR眼镜和VR头盔应用种类欠缺的问题。feelarOS可以将手机App从小屏变成虚拟的超级大屏，并支持虚拟触控等多种交互方式。此外，feelarOS将AR和VR技术融合到一个操作系统中，支持AR多任务模式和VR沉浸模式的切换。该操作系统还具备高精度SLAM和三维手势算法，为开发人员提供了更灵活的技术支持。光感科技在计算机视觉领域也取得较大突破，开发了激光雷达自动泊车、人脸识别等技术。

据彭博社报道，微软于2020年4月7日聘请了负责无线技术的苹果高管Ruben Caballero来领导其混合现实硬件和人工智能技术。Caballero目前是微软的副总裁，负责HoloLens等混合现实头显的硬件工作。微软已证实了这一聘用关系，招募Caballero显示微软对其硬件组合的投资。在苹果工作期间，Caballero担任工程副总裁，负责开发无线技术，如iPhone、iPad和Mac等设备的天线系统，同时监督苹果的全球无线产品测试工作。Caballero在苹果供职了14年，负责调制解调器部门，后来由Johny Srouji管理的定制芯片部门纳入该部门。离开苹果后，Caballero曾为硅谷的几家初创公司担任顾问，包括无线公司Keyssa和由前苹果员工经营的初创公司Humane。

苹果公司已经提交了一项名为“Imu For Touch Detection”的专利申请，该专利描述了一种用于混合现实的检测触碰的技术。该技术利用惯性测量单元（IMU）来识别用户在物理环境中触碰表面的时机，并提供相关响应。可穿戴设备，如手表或指环，可以配备IMU来追踪力、加速度和声学信号。当用户佩戴可穿戴设备并在物理环境中触碰表面时，可以利用IMU的传感器数据来确定触碰事件，如检测到的力指示触碰事件。触碰事件可以指示触碰对象和表面之间的接触，并通过触碰图像向用户提供响应。触碰图像可以通过第二设备捕获，例如RGB图像或深度图像，并可用于生成或细化触碰对象的模型。此外，基于深度学习的方法可以用来判断真实的触碰事件和其他非触碰事件。该专利申请于2019年9月提交，并已经公布。

微软的Azure Remote Rendering是一项新的混合现实服务，它能够将高质量的3D内容和交互体验实时流媒体到设备上，而无需将模型简化或裁减。通过利用Azure的云计算能力，该服务允许用户以原始的完整细节与建筑、工程和设计模型进行交互，避免了视觉质量的降损。在工业工厂管理、资产设计审查、术前计划等场景中，这种将细节化为逼真三维可视化的技术将起到关键的作用，帮助用户更好地理解复杂信息并做出正确决策。Azure Remote Rendering现已作为公开预览版提供，用户可以使用SDK来轻松扩展自己的混合现实应用程序，并且该预览版支持HoloLens 2和Windows 10 PC。

苹果正在研究一项名为“Dynamic Ambient Lighting Control For Scenarios Involving A Head-Mounted Device”的动态环境照明控制技术。该技术利用头戴式设备搭载的摄像头捕捉图像数据来确定当前环境照明条件，并根据目标照明条件调整环境照明外设。通过控制信号的传递和调整，系统能够提供高质量的计算机生成现实内容。这项技术的详细描述在美国专利申请中公布。需要注意的是，这只是一份专利申请，苹果是否会商业化这项技术还不确定。 该技术解决了利用头戴式设备提供混合现实内容时遇到的摄像头、内容生成、显示质量、处理速度和系统成本等方面的限制问题。实施该技术可以提高混合现实内容的质量，并增强用户的感知体验。该技术的研究表明，苹果对于提升XR设备的功能和性能持续投入研发，有望推动XR行业的发展。

在COVID-19疫情期间，Oxford Medical Simulation（OMS）免费为医院和医学院提供虚拟现实医疗培训系统，旨在帮助急需的医护人员快速训练。OMS希望退休的医生和护士能够回归，并协助处理冠状病毒患者及其他医疗急症病人，如心脏病、中风和骨折等。OMS的虚拟医疗培训系统可通过VR头显提供基于网络的动画化患者培训场景，实现沉浸式的体验，用户可以在家中完成培训。OMS已与约50家医院和医学院合作，向约1.7万名医疗专业人员和学生提供免费模拟培训。该培训可以帮助非专家医护人员恢复相关的应对技能，照顾非COVID-19患者的需求。学校教育方面，OMS系统被用于急诊医学轮训和实习生培训，学生们对其积极反响。模拟系统可以帮助学校提高学生技能，以应对COVID-19的医疗案例，重要性不言而喻。