Nweon

微软的混合现实头显HoloLens 2正式进入巴西市场。巴西国内的机构组织PBSF正在利用HoloLens 2来预防新生儿的神经后遗症，如围产期窒息。据PBSF估计，巴西每年有2万至3万名围产期窒息婴儿。通过使用HoloLens 2，当地医生可以与位于圣保罗的监测和情报中心专家进行远程协作，共享婴儿的3D结构图，并在医生视场中接收远程专家的指导说明。这种协作可以提高诊断速度和治疗效果。PBSF的创始人兼首席执行官Gabriel Variane表示，HoloLens 2将提高婴儿脑窒息病例的评估质量，同时也是挽救儿童生命的基础。他们希望该解决方案可以帮助巴西和全世界的儿童获得最佳治疗方式，并强调时间对于避免可能影响一生的病患的机会窗口非常重要。

英伟达在2023年GTC大会上发布了名为Project Mellon的轻量级Python包。这个包利用了语音AI（NVIDIA Riva）和大型语言模型（NVIDIA-NeMo服务）的功能，简化了沉浸式环境中的用户交互。开发者可以通过申请测试资格，探索创建由自然语音命令控制的XR体验。Project Mellon的基本理念是以实用的方式利用语音人工智能和大型语言模型的力量，从而赋能虚拟世界。英伟达指出，XR中的用户界面可能复杂且难以使用，导致自然沉浸感减损。Project Mellon允许开发人员轻松地将自然语言理解添加到自己的应用程序中，作为一种新型的以人为中心的免手操作用户界面。Project Mellon 1.0的主要功能包括通过自然语言提问完成任务、查询情况或发现问题，无需记住特定命令。英伟达表示，通过语音人工智能和Project Mellon，开发人员可以简化用户交互体验，不再需要培训用户如何操作虚拟现实中的每一项功能，可以用自己的言语来控制体验。

Meta在GDC大会上分享了有关Quest Store的数据信息。据悉，这个VR商店的内容数量已经超过500个，其中40款内容的总营收超过1千万美元。此外，Meta表示营收超2千万美元的游戏数量同比增长了一倍。而在2022年10月的Connect大会上，Meta曾指出Quest Store中有33款内容突破了1千万美元的营收大关。换句话说，商店在大约5个月的时间里增加了大约100款内容，而营收超千万美元的内容增加了7款。Meta肯定会统计Quest Store中支持Quest 2或Quest Pro的所有应用和游戏，而不仅仅是这两款设备的内容。关于总商店营收的任何变化，公司今天没有透露。但在2022年Connect大会上，Meta表示从2019年成立到2022年10月，Quest游戏创造了超过15亿美元的营收。Meta内容生态系统总监兼第三方游戏负责人克里斯·普鲁厄特指出，质量和营收之间存在巨大的相关性，平台不断增加的营收潜力将推动质量的提高。他还表示Quest的用户群体随着时间的推移越来越不同，新加入的用户期望与现代游戏主机相似。此外，普鲁厄特认为Quest 2在视觉质量和游戏复杂性方面仍有提升空间，因为还有一些未使用的技术。

ARVORE工作室宣布与雅达利ATARI合作，今年夏天将推出像素风格VR游戏《Pixel Ripped 1978》，将玩家带回经典的孩提游戏回忆。该系列的一个特点是采用像素风格，模仿70年代末到80年代的游戏，这种色彩斑斓、抽象的画面在许多玩家心中占据特殊的位置。为了进一步表达怀旧情怀，ARVORE与雅达利达成重大合作，预告片中展示了经典的雅达利2600和相关游戏，如《水晶城堡》和《亚尔复仇记》。虽然这些游戏不是雅达利最有影响力的作品，但这次合作允许工作室进一步还原孩提时代的回忆，向70年代末到80年代初的游戏致敬。游戏描述了主角Dot和古怪的梦想家"Bug"联手，Dot需要应对多维挑战，保护Bug的童年记忆不受邪恶角色Cyblin Lord伤害。该游戏主要面向Pixel Ripped系列的粉丝和雅达利社区。《Pixel Ripped 1978》计划在今年夏天登陆PCVR、PSVR2和Meta Quest 2平台。

Nweon于2023年3月23日发布的文章介绍了一个名为“Systems and methods of multi-antenna radio for wireless communication”的专利申请，该专利申请由Meta提交。该专利描述了一种节能的无线电架构设计，可以在AR/VR头显中实现类似的吞吐量，并降低功耗。该设计包括多个天线和发射链的组合，通过RF控制器电路将发射链的输出分割成多个信号，并经由多个天线进行无线传输。通过减少发射链的数量，可降低可穿戴设备的成本和功耗。专利申请中还描述了使用MIMO和最大比值组合（MRC）方法来处理传入信号的实施例。此外，专利申请中还涵盖了可穿戴设备与接入点之间的无线通信和数据传输，以及可穿戴设备中天线的布置和配置情况。该专利申请于2021年8月提交，并已公布。

微软曾经开发过一个基于HoloLens的机器人+AR框架，用于机器人操控交互。现在，美国陆军也在积极研发军工版微软HoloLens，并探索机器人和AR的协同作战。这种机器人+AR的解决方案可以避免携带多余的硬件设备，同时允许用户直接在视场中可视化各种数据信息，进一步优化控制机器人的能力。 现在，随着脑机接口（BMI）的迅速发展，人们开始探索直接通过意念+AR的方式来控制机器人。这在许多领域都有潜在的应用潜力，例如允许残障人士通过意念来控制轮椅或假肢。在军事领域，这也非常重要，因为无人机的应用越来越广泛，但对于无人机与士兵的协同作战，任何多余的动作或言语都可能暴露士兵的位置，造成生命威胁。 为此，研究人员在澳大利亚科技大学与澳大利亚陆军和国防创新中心合作，共同研发了一种基于干式可穿戴脑机接口和微软HoloLens的机器人控制方法。研究人员还探索了一种亚纳米厚外延石墨烯的三维微图案传感器，用于检测脑电图信号。 这项技术已在士兵中进行了测试，士兵通过脑机接口以无需手和语音的方式操作Ghost Robotics四足机器人，准确率高达94%。研究人员相信，这项技术将引起科学界、工业界和政府的兴趣，并将继续在脑机接口系统方面取得进展。

高通正在探索超分辨率技术作为解决VR设备性能挑战的方案之一。他们与《Virtual Desktop》的开发商合作，将Snapdragon Game Super Resolution集成到头显渲染中，提高PCVR的质量。此技术可以将低分辨率的图像提升到更高分辨率，从而产生清晰的视觉效果，同时消耗的资源比本地渲染更少。通过应用超分辨率，在头显端进行upscaling可以减少无线带宽的需求，降低功耗和带宽压力。高通的解决方案针对虚拟现实的特定方面进行了优化，包括高性能、低延迟和单程特性，使其非常适合采用骁龙XR2平台的头显。高通表示将分享更多与Snapdragon Game Super Resolution相关的内容。

Meta日前宣布将Oculus的内容发行团队正式更名为Oculus Publishing。这支团队成立已有十年，并一直致力于支持第三方开发者构建和发布优秀的虚拟现实（VR）内容。Oculus Publishing将继续与第三方游戏开发商和联合发行商合作，为合作伙伴提供资金、指导、推广和营销等方面的支持。他们已经为300多个作品提供了资金，并正在开发中的合作项目多达150个以上。目前，Meta Quest Store的内容数量已经超过500个，40款内容的总营收超过了1千万美元。Oculus Publishing对与众多朋友和合作伙伴一起取得的成就感到兴奋，并对未来充满信心。

大朋VR在官方微信号上宣布已完成一轮过亿元人民币融资，由青岛微电子创新资本领投，青岛文投资本等机构跟投。该公司计划加大对核心技术和产品的研发力度，并以青岛崂山区为中心构建业务的全球化布局。大朋VR成立于2015年，是一家专注于软硬件一体化的全栈XR技术与产品公司。据介绍，大朋VR的客户已遍及海外40+国家和地区，服务超过1.3万开发者。在消费者市场，大朋VR发布了面向全球VR游戏玩家的新品“大朋E4”，支持4K显示、120Hz分辨率，集成了强大的自研图形优化引擎技术。对于企业级市场，大朋VR通过P系列VR一体机等产品支持医疗、教育、培训等领域，涵盖国内外全球客户。大朋VR的首席执行官陈朝阳表示，感谢投资人们的支持，公司将继续用饱满的热情打造更优秀的VR产品，让全球更多的游戏玩家爱上VR。

流量整形（traffic shaping）是一种限制网络连接流出的流量和突发的方法，使得报文以较均匀的速度发送出去。Meta在名为“Systems and methods for network traffic shaping”的专利申请中介绍了一种用于XR设备的流量整形方法。该方法可利用网络流量整形和DRX周期调整，特别适合边缘计算架构和由XR设备生成或使用的视频数据等不同类型的数据流量。通过根据网络传输的数据类型提供延迟预算，可以在不影响用户体验的前提下进行流量整形和DRX周期调整。设备可以与网络通信，获取用于调整DRX周期和流量整形的统计和参数，如端到端延迟时间和packet到达间隔时间。根据延迟预算和端到端延迟时间之间的比较结果，可以进行DRX周期调整和流量整形的可行性识别；若有空间，则可以增加DRX周期、聚合packet；若空间不足，则可以分割packet或更频繁地发送。该技术可实现网络性能、功耗和数据传输等的优化。此专利申请于2021年8月提交。