Nweon

微软为HoloLens带来了Moving Platform Mode（移动平台模式），允许在移动平台中使用设备。最近，美国专利商标局公布了一份与这一功能相关的微软专利申请，名为“Tracking in a moving platform”（移动平台追踪）。该专利描述了一种在移动平台追踪实体的3D位置和方向的方法，通过接收惯性测量单元和视觉追踪数据来计算实体的位置和方向。融合器可以同时考虑移动平台和实体的状态，从而提高追踪性能。这种功能可在船舶、飞机、汽车等移动平台上使用。此外，专利还提供了应用案例，例如在船舶上使用HoloLens显示平台锁定的全息图，或乘客在行驶的汽车中使用头戴式显示器进行追踪。这项专利申请于2023年5月提交。

MR端到端解决方案供应商ThirdEye近日宣布与日本再生生物工程公司OmGeneum签订了一份价值超过1亿美元的合作合同。双方将合作融合ThirdEye的AI驱动智能眼镜、定制AI/MR软件应用程序以及OmGeneum的技术平台，从根本上优化医疗行业。OmGeneum正在开发下一代技术用于调节目标组织、器官或细胞再生，以改善再生（干细胞）药物治疗神经疾病、紊乱和功能障碍。根据合同，ThirdEye将与OmGeneum合作，为各种医疗用例提供AI驱动智能眼镜和AI/MR软件，包括视力受损、阿尔茨海默氏症、远程手术、外科3D叠加、健康AI分析和急救人员协助等。通过将基于AI的系统叠加在工作人员的视场上，可以大幅提高工作效率，AI还可以提供关键的数据分析洞察，协助医疗医药的研发。OmGeneum表示，这种长期合作将通过结合ThirdEye的技术和他们在健康垂直领域的行业领先专业知识，为医疗保健领域提供新颖的技术方法，并实现最先进的医疗保健用例。而ThirdEye则表示将继续支持全球客户，并对在数百家医疗机构和学校进行技术部署感到兴奋。

苹果公司近日宣布，在美国纽约和澳大利亚悉尼设立了Apple Vision Pro开发者实验室，以帮助开发者体验、学习和构建visionOS应用。开发者可通过苹果官方网站上的页面申请预约访问。该实验室将提供为期一天的活动，成员包括苹果开发者项目或开发者企业项目的现有成员，推荐一名设计师和一名工程师参加。申请人需要使用苹果ID登录并完成请求表单，提供应用程序在visionOS模拟器中运行的截图。优先考虑正在开发全新visionOS应用程序或为visionOS增强现有iPad或iOS应用程序的开发者。通过审批的人员将获邀参加实验室活动，可以亲身体验visionOS、iPadOS和iOS App，并在苹果支持下测试和优化应用。苹果CEO库克在采访中表示，对中国开发者在Vision Pro上的开发有高期望，已经有一群开发人员在上海为Vision Pro进行开发，预计会受到热烈欢迎。

即将与PSVR 2玩家见面的《燃烧吧 蜘蛛VR》在PC版本取得了巨大成功。游戏在Steam平台上获得了超高的好评，2600多名玩家给出了“好评如潮”的评价。开发团队日前宣布，VR版本将于11月7日登陆索尼虚拟现实平台。 在游戏中，玩家扮演一位持证除虫人员，面对人类最古老且致命的敌人——蜘蛛。为了击败蜘蛛，玩家需要利用火、子弹、爆炸和飞镖等武器来弱化它们。游戏提供了数十种不同的武器和真实的火焰模拟系统，让玩家在混乱和破坏中获得极大的快感。 借助VR的沉浸式力量，玩家的代入感将进一步增强，可能会在游戏过程中体验到令人头皮发麻的时刻。《燃烧吧 蜘蛛VR》将于11月7日登陆索尼PSVR 2平台，让玩家们期待不已。

领先的社交媒体公司Meta在构建XR平台方面遇到了挑战。在Meta的头显中与朋友互动非常碎片化，需要通过不同的应用程序和方式进入同一个空间。与之相比，苹果采取了一种不同的社交策略。苹果的Vision Pro头显将社交作为一种期望，为应用程序提供了通用的工具和指导方针，使应用程序从一开始就具有社交性。苹果通过现有的应用生态系统和经过测试的社交技术实现了这一愿景。 苹果的Vision Pro采用了SharePlay技术，允许用户通过FaceTime一起观看、听听音乐等。苹果将为其第一方应用程序提供现成的社交功能，并鼓励开发者采取相同的措施。Vision Pro还支持“Spatial Personas”（通过人脸扫描生成的Avatar），并提供了多种预配置房间布局。通过SharePlay，苹果还提供了后台管道来保持应用程序在用户之间的同步。 值得注意的是，苹果依赖于用户现有的个人朋友图谱，而不是试图创建一个定制朋友列表。苹果强调了“默认具有社交性”、“你已经做过的事”和“你已经认识的人”的概念。 总体而言，苹果在社交方面的策略与Meta有所不同，可能会更加成功。然而，苹果的SharePlay技术在完全沉浸式的社交体验方面存在局限性，对于数量超过5个的Avatar和更多的网络控制可能不够适用。

自2023年10月17日起，Meta Quest 3的发售导致用户开始发布自己与现实世界互动的视频。Meta的新头显允许用户在穿戴设备的同时进行其他活动，如做饭、扫地或享受咖啡。人们开始在户外公共场所穿戴Quest 3，并录制他们的体验。然而，这种行为也引发了一些担忧，比如在电梯等待时的尴尬场景。虽然十年前公众舆论反对谷歌眼镜，但现在对隐私的定义、对公共摄影的容忍以及对可穿戴技术的态度都发生了变化。智能手机摄像头的普及使得商家从相关的网红短视频中受益。然而，人们对Meta Quest 3是否会造成侵犯他人隐私的问题表示关注，因为该设备在录影时没有明显的提示机制。至于Meta如何应对这个问题，目前还没有官方回应。

MEMS微镜在光学应用中需要解决结构强度和变形的问题。现有的解决方案是增加微镜的厚度，但这会增加压力和应力，可能导致性能问题。为解决这一问题，Meta提出了一种名为“Stiffening structures for micro-electro-mechanical system (MEMS) micromirrors”的专利申请。该专利申请描述了一种用于增强MEMS微镜结构的方法，通过在支撑平台上添加多个强化结构来支撑微镜表面，以保持光学平坦度。这些强化结构可以按层级分布，形成不同层次的支撑结构。图例展示了不同形状（方形、圆形）的微镜示例，以及强化结构的位置和密度如何随着径向位置的变化而变化。这些强化结构可以使用标准微加工技术制造，材料可以是硅、氮化硅、氧化硅或碳化硅。该专利申请的目的是减少微镜的质量、扭曲和应力，从而提高其性能。

英伟达回顾了NVIDIA Research和其他机构对电子竞技需求的研究，并讨论了它们对其他交互式应用的影响。随着媒体技术从被动流媒体向参与式交互性体验过渡，人们对显示延迟、刷新率和大小等特征的需求也在改变。在电竞游戏中，响应时间是决定胜负的重要因素，电竞玩家愿意为了获胜而牺牲图形功能。英伟达认为电竞游戏是图像研究人员为注重性能人群设计新渲染系统的机会，同时也对其他交互式应用如AR/MR/VR等产生影响。高帧率交互为新的渲染方法提供了机会。延迟隐藏是一种轻量级方法，VR风格的延迟输入采样和基于图像的扭曲是隐藏延迟的手段。对于电竞玩家而言，最重要的是降低延迟，其次是高空间分辨率，保真效果相对次要。英伟达对电竞研究的前景感到兴奋，认为这将为开发者和游戏玩家提供新工具和设备，同时为VR/MR/AR等交互式应用提供重要参考。

混合现实（MR）技术在地震安全演练方面具有广阔的应用前景。北京科技大学的研究人员利用微软HoloLens构建了一种MR地震演练体验，并发现MR指引可以提高疏散效率。除了在演练中使用，MR还可以通过警报和求生指引等方式在真实地震事件中为用户提供实时帮助。 然而，MR演练仍然面临着一些挑战。研究人员需要解决如何从点云数据中提取非结构构件的几何和空间信息，并重建室内三维场景的问题。他们还需要建立准确的非结构构件物理模型来模拟地震损伤并将其可视化。此外，如何根据非结构构件的震害情况为参与者提供指引也是一个重要问题。 北京科技大学的团队通过HoloLens捕捉室内点云，并利用物理引擎和MR显示技术模拟和可视化非结构构件的地震损伤。他们还开发了一种基于HoloLens的安全区域引导算法，以提供给参与者在地震安全演练中的指导。实验结果表明，MR演练可以显著提高疏散效率。 这项研究为基于MR的地震安全演练提供了一种新的方法，但仍需要进一步完善，如考虑更多的非结构构件的地震损伤模型和安全评分模型等。这将进一步提高参与者的安全能力和演练效果。

日前，Wearable Devices宣布正式加入Khronos Group的OpenXR工作组，并成为具有投票权的成员。Wearable Devices的旗舰产品是Mudra Band，用于Apple Watch，该产品利用人工智能技术和算法集成到腕带中，通过专有传感器识别手指和手腕的动作，实现用户的交互。OpenXR的目标是简化增强现实/虚拟现实软件开发，并帮助应用程序能够在广泛的硬件平台上开展而无需移植或重写代码。通过OpenXR，开发者可以创建真正的跨平台扩展现实XR体验，同时为支持OpenXR的供应商提供更多的应用程序。Wearable Devices的创始人兼首席科学家盖伊·瓦戈拿表示，他们很高兴加入OpenXR工作组，与行业领导者一起为真正的跨平台XR应用开发做出贡献。Khronos Group表示，他们非常高兴Wearable Devices加入OpenXR工作组，并期待他们在可穿戴设备控制领域的贡献。