Nweon

近期美国专利及商标局公布了一批全新的AR/VR专利，包括Magic Leap、Meta、Microsoft和Apple等公司的专利。这些专利涵盖了AR/VR领域的多个技术方面，如临时禁用用户控制界面、高分辨率数字化显示器、节能的头戴式显示系统、光输出系统、天线架构、光提取效率增强、光学透镜组件、可寻址投影仪等。这些专利通过技术方法和系统的描述，展示了这些公司在AR/VR技术领域的创新和研发成果。这些专利的公布对于推动AR/VR技术的发展和应用具有重要意义。这段文本是一篇关于XR专利的简要概述。以下是其中一些专利的主要内容： - 索尼专利：VR晕动症减少系统、头戴式显示器、VR晕动症减少方法和程序。描述了一种通过定位头戴式显示器并根据用户的加速状态来控制摇动部分的方法。 - Niantic专利：使用先验姿势模型改进摄像头重新定位确定。描述了一种通过将计算机视觉算法的输出与先前模型的数据融合来提高重新定位准确性的方法。 - Google专利：通过手势控制头戴式设备。描述了一种通过识别手势并响应其启动应用程序的请求来控制头戴式设备的方法。 - Qualcomm专利：基于注视检测的图像处理系统和方法。描述了一种根据用户注视的图像信息来处理图像的方法。 - HTC专利：用于虚拟现实的运动计算系统和方法。描述了一种根据用户手部姿势和设备的位置生成虚拟现实场景的方法。 - Snap专利：与旅行相关的基于增强现实的转译。描述了一种基于用户行进参数和图像中对象的属性来生成与旅行相关的增强现实转译的方法。 - Valve专利：用于显示系统的校正偏振补偿光学元件。描述了一种通过空间变化的偏振器来校正显示系统的偏振补偿的方法。 这些专利涉及到各种XR技术，例如虚拟现实、增强现实和头戴式设备。它们展示了XR领域中的创新和发展。

根据消息人士称，据韩国监管机构的无线电产品认证中发现，Valve公司正在开发一款全新的硬件，很可能是Valve Index的接任者。Valve公司在今年3月的采访中表示，在未来几年内不会推出第二代Steam Deck掌机，因此这款新设备可能是被称为Deckard的无线一体机。这款设备的模型号为1030，而Valve Index和Steam Deck掌机的模型号分别为1007和1010，似乎表明这是一款全新的设备。此外，Linux Kernel 6.6代码中也出现了暗指新硬件的参考资料，Valve在“Valve Jupiter device”下添加了与“Galileo”和“Sephiroth”相关的代码。根据早前的报道，Valve一直在修改Van Gogh APU的代码，这被认为与未来高性能VR一体机有关。因此，社区推测这些线索与无线一体机Deckard相关，并且Valve公司已明确透露正在研发下一款VR头显设备。

Roblox, the game with 65 million daily active users, announced at the RDC 2023 developer conference that it will officially land on the Meta Quest Store this month and be available on Sony PlayStation 4/5 in October. The game initially launched in Meta App Lab for free testing on July 28, and the application has been downloaded more than one million times in the first five days. Designed specifically for VR headsets, Roblox allows users to create and share experiences with friends, offering a range of immersive experiences created by a global community. The continuously growing experience library means there is always something exciting waiting for users. The team also announced at the RDC 2023 conference that Roblox will be available on Quest Store this month and on Sony PlayStation 4/5 in October. They are expected to officially announce this news at the Connect conference on September 27. The team also mentioned that they will introduce more AI tools to help users create content more easily. Additionally, they will add an Avatar chat tool for phones, mapping the facial tracking of the front camera to the Avatars in Roblox, enabling realistic Avatar conversations.

根据工信部等五部门的消息，工信部近日印发了《元宇宙产业创新发展三年行动计划(2023-2025年)》文件。文件指出，要提升创新支撑能力，支持建设元宇宙重点实验室、制造业创新中心、内容制作基地等载体，加强基础技术研究，加快技术突破，打造元宇宙中试平台，提升产品和服务质量。同时，要引导金融资本支持元宇宙发展，推动减税降费政策向元宇宙相关产业倾斜。工信部要求，到2025年，元宇宙技术、产业、应用、治理等要取得突破，成为数字经济的重要增长点，产业规模壮大且布局合理，技术体系完善，综合实力达到世界先进水平。此外，到2025年，元宇宙领域要培育具有全球影响力的生态型企业和一批中小企业，打造产业发展集聚区，形成典型应用和标杆产线、工厂等，推动元宇宙在生活消费和公共服务等领域形成新业务和新模式。工信部还提出了统筹协调、优化人才培养和深化国际合作三个措施。详情请参阅工信部官方链接。

由浙江大学和苹果联合发起的第八届中国高校计算机大赛-移动应用创新赛总决赛在杭州成功落幕。此次比赛共有6个作品获得一等奖，包括北京航空航天大学的ARKit应用《Bee Hero》和北京邮电大学的ARKit应用《药忆》。 《Bee Hero》是一款寓教于乐的AR游戏，通过化身成为蜜蜂英雄的孩子在户外探索大自然，寻找花朵并帮助它们传播花粉，以培养儿童的生态保护意识。 《药忆》是一款旨在帮助年老人群正确识别、记忆和正确按时服用药品的应用程序，利用AR技术实现了AR辅助吃药功能。通过AR方式来引导用户正确服用药品，并提供正确的用药指南。 这两个应用都利用了AR技术来解决各自瞄准的应用场景，通过与植物互动和药品识别等功能，提供了丰富的用户体验。 此次大赛旨在以学生成长为中心，提升学生发现问题、分析问题和解决问题的能力，特别强调了将前沿技术与移动应用设计与开发融合的能力。

Snap在一项名为“Scene change detection with novel view synthesis”的专利申请中提出了一种在二维图像域而不是三维空间中实时检测场景变化的系统。该系统使用视觉定位将两个会话的坐标系统对齐，并应用NeRF模型生成新图像。系统通过减去合成图像特征和第一会话图像特征之间的差异来识别场景变化。该系统以特征相减计算热图，并将其提供给AR应用程序显示。Snap的专利申请描述了一个六自由度追踪器，用于估计AR设备的姿态，以及一个场景变化检测系统，用于对比当前和先前会话的轨迹和图像。通过使用二维图像特征的变化来检测场景变化，该系统可以解决一些资源密集型和准确性问题，并帮助节省功耗。该专利申请最初于2022年2月提交，并最近得到美国专利商标局的公布。

瑞士联邦理工学院（ETH）、代尔夫特理工大学、英伟达和伯明翰大学的研究人员在一篇名为《GazeNeRF: 3D-Aware Gaze Redirection with Neural Radiance Fields》的论文中提出了一种新的3D感知注视重定向方法，名为GazeNeRF。该方法利用了基于图像的条件神经辐射场（NeRF）的最新进展。研究人员将人脸和眼睛建模为两个单独的3D结构，并使用神经辐射场模型将它们构建为单独的特征体积。为了实现3D感知的注视重定向能力，研究人员提出了一种新的two-stream MLP结构，分别预测眼球和面部区域的特征映射。通过交换眼睛区域的特征并应用3D旋转变换，GazeNeRF可以生成逼真的面部图像，并在注视重定向任务方面取得了领先性能。研究人员表示，GazeNeRF具有3D感知的优势，并且在下游应用方面具有巨大的潜力。然而，他们也指出GazeNeRF具有训练时间长的限制，并表示将把减少训练时间作为未来的工作方向。

Meta在一项名为“基于光导的反射显示面板照明器”的专利申请中提出了一种解决XR头显漏光问题的方法。该方法利用照明器将光束引导到反射显示面板，形成图像光束。在光导中形成的漏光光束与图像光束共同传播，但它们不会重叠，并朝向视窗。照明器包括透射衍射光栅，用于将照明光束以不同角度重新定向到反射显示面板。透射衍射光栅可以根据光的偏振状态重定向光束。此外，照明器还可以包括波片，用于使照明光束和图像光束具有相互正交的偏振状态，以进一步减少漏光。此外，显示装置还可以配备眼动追踪器和控制器，以根据用户的眼睛位置将图像光束定向到所需位置。这项专利申请可以提高XR头显的图像对比度和清晰度，解决漏光问题。

苹果将于2024年初推出名为Vision Pro的设备，该设备没有专用控制器，主要通过手部和眼部输入控制。这引发了社区的担忧，认为游戏开发商将难以移植现有的VR游戏到该设备上。然而，VR游戏开发商Resolution Games宣布他们正在开发由热门桌游《Demeo》衍生的Vision Pro版本，并将支持VR和MR两种玩法。同时，新版本的《Demeo》已经为Quest 2和Quest Pro提供了包含手部追踪支持的混合现实玩法。游戏允许多达四名玩家一起探索充斥着恐怖怪物和危险陷阱的地牢空间。该工作室还在积极布局MR游戏，并表示混合现实项目目前占他们工作的一半。Resolution Games的联合创始人保罗·布雷迪表示，“真实与虚拟之间的交互令MR变得神奇，手部追踪技术的进步不仅令无控制器的未来成为可能，而且令人难以置信地引人入胜，我们正在迅速进入一个身体比手持控制器更有效的未来”。

根据映维网（Nweon）的报道，中山大学孙逸仙纪念医院团队利用微软HoloLens 2和西门子医疗的双源CT方案成功实施了全国首例可视化皮瓣移植手术。传统手术中，医生只能依靠术前平扫图像和经验估算病灶位置范围，而利用HoloLens 2，医生可以将病灶投影在体表上，精确勾勒出手术区域。在手术中，医生能够实时配准全息仿生实景渲染图像与患者实体，精确勾画出皮瓣血管走行，从而实现可视化自由式皮瓣切取，大大缩短手术时间并提高手术准确性。另外，西门子医疗的双源CT可以重建出逼真的全息仿生实景渲染影像，帮助医生确定皮瓣区域，助力手术诊疗规划。此外，中山大学孙逸仙纪念医院团队将继续拓展可视化导航应用，为更多患者带来福祉。