Nweon

美国专利及商标局最近公布了一批全新的AR/VR专利。以下是其中的15篇专利摘要： 1. Magic Leap的专利涉及用于卫生系统和医疗保健应用的设备，可以诊断和治疗患者，例如通过眼睛的像差计诊断方法和系统。 2. Facebook的专利描述了用于校准电子显示器亮度的系统，通过亮度检测组件和控制组件来实现。 3. Facebook的专利涉及低功耗高亮度的集成式彩色LED微型显示器以及其制造方法。 4. Facebook的专利涉及全景相机系统，可以捕获环境的双目全景视图。 5. 微软的专利介绍了在增强现实和虚拟现实系统中自动程序架构，根据用户的工作流程和情绪状态选择自动程序，并将其注入到用户的工作流程中。 6. 微软的专利涉及用于3D渲染的选择性表面网格再生，根据近距离和用户视角选择性地生成更新的表面网格。 7. 微软的专利描述了近场对象在虚拟环境中的无限远场深度感知方法和系统，通过立体投影变换将近场对象呈现为远场对象。 8. 微软的专利涉及MEMS扫描显示设备，通过扫描镜系统和控制组件来控制光线扫描，形成图像。 9. 苹果的专利涉及在真实环境中描绘虚拟对象的方法和设备，通过录制组件生成真实环境的图像并将虚拟对象合并到图像中。 10. 谷歌的专利涉及包括衍射组合器和眼动追踪传感器的头戴式显示器，实现眼动追踪和显示的集成。 11. 谷歌的专利描述了在增强现实和虚拟现实环境中进行对象追踪的方法和系统，识别环境对象位置并在虚拟环境中呈现。 12. 索尼的专利涉及增强现实图像处理装置和方法，通过图像剪切和分离等处理来合并真实环境和虚拟图像。 13. 索尼的专利描述了图像处理装置和方法，根据图像识别处理的结果生成虚拟图像。 14. 索尼的专利涉及头戴式显示器，通过姿势指定单元控制发光单元的亮度，并根据头部运动数据调整图像扫描速率。 15. 英特尔的专利涉及宽频平坦光学元件，通过多层超表面堆叠实现所需的折射率对比度。

Facebook在加利福尼亚大学旧金山分校的研究人员的帮助下更新了他们的未来派脑机项目。研究人员通过植入性电极解码人类思维的实验，证明系统能够“读取”大脑构思的单词和短语。这使得Facebook离实现非入侵性的思维读取系统更近了一步。实验中，研究人员向被试播放了一系列的多选题，并要求他们大声诵读答案。电极阵列记录大脑中与理解语言和产生语言相关的部分活动，并寻找与特定单词和短语实时匹配的模式。系统的准确度在61%至76%之间，期望概率为7%至20%之间。然而，系统目前只能识别非常有效的字词，并且实验只询问了九个问题。这项技术可能有助于改善因瘫痪或其他问题而无法说话的患者的生活。

美国的PTC公司宣布与半导体芯片制造商GlobalFoundries达成重要合作，为后者提供增强现实（AR）解决方案。总部位于加州圣克拉拉的GlobalFoundries将使用PTC的AR软件Vuforia来培训员工。通过在AR眼镜上叠加真实动画，员工能够准确判断复杂机器中的阀门，并避免错误操作造成的高昂代价。GlobalFoundries积极部署AR解决方案，以改善全球制造工厂的生产流程和效率，包括数字化标准的操作程序培训、远程专家协助和构建AI引擎的数字孪生。通过结合Vuforia Expert Capture和Vuforia Studio，GlobalFoundries可以通过AR创建数字培训体验，并利用微软HoloLens 2和RealWear HMT-1等设备进行实操。AR体验可用于提高工厂车间的效率水平和业务成果，包括新人入职培训、现有技术人员的再培训以及保留老员工的专业经验。GlobalFoundries表示，在试点阶段已经取得了成功，培训时间减少了50%。PTC的增强现实解决方案将帮助GlobalFoundries解决制造业工人技能差距的关键问题，提高工作效率和生产力，并降低错误风险。

Valve's former VR engineer and co-creator of Xbox, Nat Brown, has joined Apple. Although specific details have not been disclosed, Brown expressed his excitement to continue his interest in graphics and collaborate with all those using graphics on the Apple platform. Brown was one of the first engineers to work on Microsoft's original Xbox and has recently been focused on VR, including working with Valve and serving as an advisor for the VR platform VREAL. Apple has a primary focus on the AR field, with rumors suggesting that the 2020 iPhone will feature a time-of-flight sensor and that the company may release an AR headset that relies on the iPhone for processing power. While AR has lower performance requirements compared to VR, it still puts pressure on the graphics processor as it needs to match the surrounding environment and avoid causing motion sickness in users. Apple unveiled ARKit 3, a tool for developers to create augmented reality content for iOS devices, at WWDC 2019. Brown's tasks at Apple may be related to ARKit and/or the future Apple headset.

计算机图形大会Siggraph已经迎来了第46个年头，本周在洛杉矶会展中心举行的Siggraph 2019聚集了2D和3D数字世界的未来。展览区域开放后，Venturebeat的作者分享了他的见闻。其中一款展出的应用程序《Il Divino: Michelangelo’s Sistine Ceiling in VR》吸引了他的关注，它能够以前所未有的方式让用户感受西斯廷礼拜堂的艺术作品。此外，VR电影展览VR Theater也是今年的亮点之一，观众可以通过VR头显欣赏来自多家工作室带来的实时CG短片。另外，英伟达展出的Prescription AR和Foveated AR头显也吸引了大家的关注。此外，一些创新技术也在展示中亮相，如面部触觉解决方案LiquidMask和巨大的假体尾巴。通过Siggraph，人们可以了解CG领域的最新发展，并探索未来科技的可能性。

Magic Leap Studios在Siggraph大会上发布了最新的沉浸式作品《Undersea》，该作品旨在让用户在一个动态生成的珊瑚礁世界中欣赏水下生命并放松自己。该应用通过照片级真实渲染不同的远景和生物，给用户提供了身临其境的感受。用户可以在Magic Leap World下载应用，操作简单。应用利用手部追踪功能，让用户与鱼类进行互动，例如抚摸鱼儿等。然而，一些改进方面仍然有待处理，如增加更多不同的体验和让鱼类在用户身边晃荡。总体而言，对于经验丰富的AR用户来说，《Undersea》提供了大量的价值，将前沿技术与感官体验相结合，让用户沉浸在宁静的虚拟海底世界。

动捕软件Shōgun的1.3版本发布。新增了指尖级别的精确解释功能，并允许美术实时查看完全动画化的角色，用户可以将其传输到游戏引擎中。同时，增加了对Universal Scene Description（USD）格式的支持，为移动设备和增强现实应用提供了可能。Vicon联合奥斯卡获奖工作室Framestore合作开发了高度复杂的手指解释方案，用户可以捕获完整的身体并应用于不同规模的项目。通过这种方案，用户可以为手指设置动画，然后将数据与数字rig实时组合，生成一个完全动画化的数字角色。此外，Shōgun 1.3可以直接将数据导入游戏引擎，支持重新定位任何FBX骨架，并通过虚拟制作制片流程实时更改场景。此版本还支持Universal Scene Description格式导入骨架数据并兼容iOS设备和苹果ARKit技术。其他功能改进包括Shōgun Live用户的多机支持和性能提升，以及Shōgun Post的Gap List Function。该版本目前处于封闭内测阶段，预计将于今年晚些时候正式推出。

眼动追踪硬件制造商Tobii针对VR头显推出了新的软件更新，全面支持注视点渲染技术，而且未来还将带来更多与注视点相关的功能与优势。注视点渲染技术通过集中渲染注视点位置并降低外围区域的分辨率，从而节省GPU资源。Tobii与英伟达合作开发的Tobii Spotlight Technology使得GPU渲染负载下降57%以上，平均着色率从24%降至16%。这样释放的GPU资源可以用于提高帧速率或节省功耗。Tobii预计未来将使用动态优化的流式传输数据，根据用户的注视点进行优化，包括利用低延迟的5G网络进行传输。Tobii首席执行官表示，Tobii Spotlight Technology是一种专门用于注视点的先进眼动追踪技术，满足了计算效率不断增长的需求。Tobii初步测试表明，即使VR头显的分辨率达到或超过15K，动态注视点渲染仍然能够保持着色的可控性。

苹果公司宣布全球各地的Apple Store将开设全新的艺术类“Today at Apple”增强现实体验系列课程，名为[AR]T。课程包括由世界知名艺术家创作的交互式漫步主题作品，教授使用Swift Playgrounds开发增强现实体验的基础知识，以及在全球Apple Store展示的增强现实艺术作品。苹果邀请了七位艺术家，包括Nick Cave、Nathalie Djurberg和Hans Berg、曹斐、John Giorno、Carsten Höller和Pipilotti Rist，参与这个免费向公众开放的体验式项目。苹果表示，他们希望通过这些作品和展示激发参与者的创造力，期待大家从实验室中获得收获。这个项目将在旧金山、纽约、伦敦、巴黎、香港和东京等城市之间进行，参与者将能够在途中欣赏到世界知名艺术家的作品。艺术家通过增强现实技术重新构想了表达作品核心主题的方式，并将作品融入城市建筑中。

影创科技联合诺基亚贝尔凭借“5G+MR多终端远程全息互动平台”在第二届“绽放杯”5G应用征集大赛浙江分赛决赛中获奖。该赛事由中国信息通信研究院、IMT-2020(5G)推进组和中国通信标准化协会主办，旨在推动5G技术与行业应用融合发展。 该平台基于5G网络的高带宽、低时延和低功耗特性，能实现多人协同、全息展示、超自然交互、保存与呈现等功能，是5G时代的人机交互计算平台。其典型应用形式之一是“5G+MR全息教室”，通过结合泛化教育理念和混合现实全息技术，以立体直观形式呈现知识点，实现教学内容的全新呈现与诠释，并通过5G网络实现实时远程全息互动和远程分工协作。 影创科技的“5G+MR全息教室”已在多所大学、中学和职校落地，为智慧教育提供了一条可行的新道路，也为5G+MR技术提供了落地应用案例。 该项目的落地将支持增强现实实际应用场景方面的研发，推动我国增强现实产业在研发和应用上的落地速度，提高传统行业的生产效率和经济效益。此外，该平台还可以与电影、游戏、教育、医疗等产业领域进行有机融合，打造虚拟经济与实体经济的结合，推动区域经济在人工智能领域的布局和影响。 影创科技将继续完善“5G+MR多终端远程全息互动平台”项目，加速落地，推动5G产业的发展。