Nweon

彭博社最近详细介绍了苹果公司研发AR/VR可穿戴设备的过程。苹果AR/VR团队正在研发两个主要产品，代号分别为N421和N301。N421是一副轻便的AR眼镜，而N301是集AR和VR技术于一身的头显。然而，在产品设计中出现了一些内部冲突。N301最初设计成一个超级强大的系统，但由于过多的热量产生，无法将所有技术塞入其中。因此，团队计划销售一种固定的计算单元，将其无线连接到头显上。但是，乔尼·伊夫不喜欢N301需要外部设备才能运行的样式，认为不太强大的头显才是解决问题的办法。经过数月的争论后，苹果CEO蒂姆·库克支持伊夫的想法，并要求团队转向无需外部设备的N421方案。据报道，N421头显搭载超高分辨率屏幕，配备影院式扬声器，用户几乎无法区分虚拟世界与真实世界。

这些专利涉及到不同方面的虚拟现实（XR）技术。其中，《Google专利：基于铰接距离场的手部追踪》描述了一种使用蒙皮四面体网格进行手部追踪的方法。《Qualcomm专利：用于高效编码和/或检索的声场建模》介绍了一种声场建模方法，用于编码和检索声音信息。《Sony专利：显示控制设备和显示控制方法》描述了一种显示控制设备，该设备根据用户的位置和存在信息来控制显示位置。《Sony专利：点云辅助信息编码》介绍了一种三维点云数据辅助信息的编码方法。其他专利还涉及到索尼的图像生成、驾驶辅助系统、移动输出设备。此外，英特尔的专利涉及到基于先验深度场景的三维重建、质量选择器、视口管理器以及AMD的专利涉及到基于注视点的编码技术。该篇文章是关于最新公布的一批AR/VR专利，共有38篇。其中包括了Magic Leap关于混合现实空间音频、手语识别系统和增强现实系统的专利，Facebook关于眼戴设备的光学麦克风、动态可编程图像传感器和可编程像素阵列的专利，以及Microsoft关于光瞳复制波导和修改慢扫描驱动信号相关的专利。此外，还包括Apple关于基于注视点的视频录制、头戴式显示装置和光瞳扩展的专利。这些专利涉及的技术包括混合现实空间音频、手势识别、眼动追踪、光学麦克风、图像传感器、像素阵列、点云压缩和现实界面等。这些专利的公布表明在AR/VR领域，各大公司在技术创新和研发方面都有所突破。

EA新作《星球大战：战机中队》是一款第一人称太空射击游戏，计划于10月3日登陆PC和主机平台。游戏支持PSVR和PCVR。游戏中，玩家可以参加激烈的5V5对抗，与中队一起在壮阔的舰队战争中打破僵局，并在惊心动魄的星球大战单人战役中腾空起飞。该作品由EA旗下的Motive Studios开发，故事背景设置在《星球大战3:绝地归来》之后，并提供任务模式和多人模式。

Facebook最近确认收购了瑞典地图数据公司Mapillary，但没有透露具体条款。Mapillary通过众包方式收集智能手机和其他摄像头设备的城市图像，并使用专有算法将它们拼合成高精度地图映射。虽然Mapillary表示相关技术将主要用于支持Facebook Marketplace等产品和为人道主义机构提供数据，但有报道称Facebook发言人表示这项技术也可用于正在开发中的增强现实眼镜和虚拟现实头显等产品。 Facebook在2019年的OC6大会上发布了LiveMaps，旨在构建为未来增强现实体验打下基础的核心基础架构。LiveMaps利用机器视觉和SLAM技术创建共享的虚拟映射，并依赖未来智能设备捕获的众包信息。Facebook还在探索利用人工智能项目Map With AI快速绘制高精度地图，并与微软等公司合作。这些举措也可以用于增强现实和虚拟现实的应用，如AR数字内容叠加、AR导航和VR远程游览等。

苹果公司近日在美国专利商标局提交了一份与未来智能眼镜和/或头显相关的专利申请。该专利描述了一种名为“光瞳扩展”的技术，旨在增加投影在提供高质量AR应用图像的光学透镜之上的图像视场。专利申请中指出，全息光学元件可被用于光学头显设备的波导管中，这种头显设备具有反射投影图像能力，方便用户体验增强现实。过去的头显技术存在图像质量下降、重量和尺寸增加等问题，而苹果的发明通过光瞳扩展方法、系统或装置来优化光束，从而增加投影的视场。专利申请中还包含了与光瞳扩展相关的光学系统的示意图和光学透镜的示例。虽然尚不清楚苹果将何时商业化这项技术发明，但该专利申请显示了苹果在未来智能眼镜和头显领域的研发努力。

根据美国专利商标局公布的专利申请，苹果正在研发一款未来智能眼镜，该设备能够录制包括增强现实（AR）内容的视频，并且能减少抖动。苹果表示，这款头显可以提供虚拟现实、增强现实和混合现实体验，并且可以录制虚拟现实或混合现实体验的视频以供回放或分析。与传统智能眼镜的固定摄像头不同，苹果构思的摄像头可以由用户的眼睛或注视点驱动。此外，苹果还介绍了一种提供注视点驱动型信号处理的系统和方法，可用于促进混合现实或虚拟现实应用。这种系统可以通过追踪用户的注视点来识别感兴趣的区域，并在用户注视点移动时移动录制框。此外，专利还涉及到平滑或稳定算法，以避免录制视频中的抖动。这项专利申请于2019年第四季度提交，目前尚不清楚苹果将何时商业化这一技术发明。

据报道，苹果的AR眼镜项目备受关注，许多传言和爆料充斥着网络。文章作者认为，苹果的AR眼镜不太可能采用领先技术，也不可能超越微软的HoloLens团队。然而，作者认为苹果可能会通过利用现有技术和条件，设计出最佳的AR技术产品组合。文章提到了苹果之前选择ARKit而非谷歌Tango AR的原因。苹果的AR眼镜可能会通过将AR技术应用于传统眼镜行业来进入消费市场，而不是直接进入AR头戴设备市场。这样做的好处是，苹果可以利用已经存在的近视眼镜和太阳镜市场，将一些简单的AR功能添加到传统眼镜上，并通过多年的迭代升级最终实现高科技AR眼镜。文章表示，如果这样做，苹果的AR眼镜很可能会取得巨大的销售成功，相比之下，当前AR头戴设备市场的销量较低。文章强调了消费市场需求对苹果AR眼镜发展的影响。最后，文章也提到了对苹果AR眼镜的期待要有适度，认为其可能是一款简单轻便的智能眼镜，具备初级的AR功能，类似于Apple Watch的发展。

据报道，加州圣何塞的一名联邦法官驳回了Magic Leap对Nreal首席执行官徐驰的诉讼。法官认为Magic Leap指控徐驰利用其专有信息构建自家混合现实产品的说法没有充分证据。然而，法官允许Magic Leap修改申诉以回应这一判决，Magic Leap将有30天时间修改其指控违约、欺诈和不正当竞争的申诉。Magic Leap在2019年起诉徐驰，并指控他利用该公司的机密信息快速开发出自家的混合现实眼镜Nreal Light。Nreal之前已发布声明否认这些指控，并表示其技术均来源于团队的自主研发。目前，Nreal和Magic Leap尚未对此作出回应。

谷歌的人工智能团队在2020年计算机视觉和模式识别大会（CVPR）上分享了近70份涉及计算机视觉的研究论文，内容涵盖了对象映射与渲染、3D人类姿态生成、语义分割和透明对象关键点估计等。此外，以下是几篇与增强现实/虚拟现实领域相关的论文摘要： 1. "Local Deep Implicit Functions for 3D Shape"：介绍了一种学习三维形状表示的方法，通过深度摄像头视图推断精确的表面重建和高效计算。 2. "GHUM & GHUML: Generative 3D Human Shape and Articulated Pose Models"：提出了一个用于生成3D人类形状和姿态模型的深度学习框架。 3. "Deep Homography Estimation for Dynamic Scenes"：探讨了处理动态场景的深度神经网络的设计和训练方法，用于估计动态场景的单应性。 4. "3D-MPA: Multi Proposal Aggregation for 3D Semantic Instance Segmentation"：提出了一种基于三维点云的实例分割方法，通过投票和图卷积网络进行特征学习和聚合。 5. "KeyPose: Multi-View 3D Labeling and Keypoint Estimation for Transparent Objects"：通过RGB立体输入，提出了一种用于透明对象的多视图3D标记和关键点估计方法。 6. "DOPS: Learning to Detect 3D Objects and Predict their 3D Shapes"：提出了一种快速的单级三维目标检测方法，能够同时检测对象并预测其形状。 这些论文展示了在计算机视觉和模式识别领域的最新研究进展，对于推动增强现实和虚拟现实技术的发展具有重要意义。

微软曾为HoloLens发布了一个名为Holographic Remoting Player的应用程序，它允许通过Wi-Fi连接流式传输PC或Xbox One的内容，无需使用线缆。微软表示，通常的无线连接延迟低至50毫秒，这是性能的最佳表现。 HoloLens串流PC或Xbox One的内容有两个优势：一是混合现实应用程序可以利用PC的计算能力，二是有助于加快开发迭代时间。 要利用这一功能，首先需要下载Holographic Remoting Player，然后将应用程序从Unreal Engine Editor或打包的Windows可执行文件流式传输至HoloLens的Remoting Player。在进行流式传输时，用户可以访问与设备运行应用时相同的HoloLens功能。 在使用Unreal Editor串流至HoloLens时，需要启用HoloLens插件和Microsoft Windows Mixed Reality插件，并在Project Settings中配置相关设置。 从Unreal 4.25.1开始，还可以将应用程序从打包的Windows可执行文件流式传输至HoloLens 2，只需按照相应步骤进行操作即可。