Nweon

苹果在WWDC大会上宣布将推出ARKit 4，并利用搭载激光雷达扫描仪（LiDAR）的iPad Pro的深度信息来支持新的功能。激光雷达扫描仪具备高级场景理解功能，通过每像素的深度信息和生成的三维网格数据，实现虚拟对象与物理环境的无缝混合，使虚拟对象的遮挡效果更加逼真。这使得应用程序能够提供更精确的测量和在用户环境中应用虚拟效果。根据开发者反馈，iOS 14 Beta 6中的LiDAR的虚实遮挡效果已经达到了几乎“无法区分真假”的程度。有用户通过上传视频展示了iOS 14 Beta 6的遮挡效果，可以看到虚拟对象能够逼真地遮挡真实对象，反之亦然。与此同时，与iOS 13.6+iPhone相比，iOS 14 Beta 6在光影和虚实遮挡接合位置的处理方面有了显著提升，这主要得益于LiDAR技术。有消息称下一代iPhone 12 Pro有望搭载LiDAR，这将显著提升AR应用的真实感和沉浸感。

《映维网》报道称，即将发布的“苹果眼镜”将提供新颖的增强现实（AR）视图，用户可以在其中呈现真实环境或虚拟环境。苹果正在研发一项允许用户平滑缩放图像的技术，类似于谷歌街景的环顾功能，但无需繁琐的操作步骤。苹果希望为“苹果眼镜”和Apple AR应用程序提供平滑缩放的功能。根据苹果的专利申请，该技术允许用户缩放远处物体的视图，从而提供更广阔的视野。用户可以在计算机生成环境中自由走动，平滑地切换到另一位置的视图。此外，苹果还申请了一项专利，旨在通过匹配摄像头噪点提升“苹果眼镜”看到的虚拟对象的真实感。这项技术可以使虚拟内容与真实图像内容相结合，提供更逼真的体验。这些专利具有重要的应用前景，希望能够改善增强现实技术在用户体验方面的不足。

微软的HoloLens 2在制造业、建筑业、医疗业和零售业等行业一直为企业员工提供支持，帮助他们更快地完成任务并减少错误和浪费。HoloLens 2利用了大量的传感器和专用ASIC，并允许多个实时计算机视觉工作负载连续运行。它同时也是一款强大的计算机视觉研究设备，具有研究模式，可以让应用程序代码访问视频和音频流，并利用内置的计算机视觉算法获取设备运动数据和环境的三维网格。HoloLens 2内置多个灰度头部追踪摄像头和深度摄像头，还有用于眼动追踪和虹膜识别的红外摄像头和LED。研究人员可以启用研究模式，并访问原始图像传感器流，获取加速度计、陀螺仪和磁强计读数。研究人员还可以利用内置的计算机视觉算法的结果，并选择将原始传感器数据用于自己的算法。HoloLens 2特别适合作为一个第一人称视角的视觉研究平台，可以可视化算法结果。微软将在欧洲计算机视觉会议上展示HoloLens的功能，并已经将示例应用托管至GitHub。

埃隆·马斯克创办的Neuralink是一家致力于开发人脑和计算机设备之间新型接口的公司。Neuralink在直播中演示了相关手术机器人，并表示此次直播的目的是招聘人才，而不是进行筹资或宣传。马斯克指出，他希望Neuralink的技术能够解决人们普遍存在的神经问题，如记忆力减退、焦虑、脑损伤和抑郁等。他展示的设备尺寸较小且能够隐藏在头发下面，Neuralink的技术已经获得美国食品药物管理局的“突破性设备”称号。马斯克展示了安装了Neuralink设备的猪，演示了设备能够检测到猪的行为并进行读写操作。虽然目前只是一个读取组件，但未来的计划是提供读写功能。马斯克表示，Neuralink的最终应用包括通过意念召唤特斯拉和控制游戏，甚至可以保存和重放记忆。第一次临床试验将集中于因颈脊髓损伤导致截瘫或四肢瘫痪的个体。

中国影创科技集团在重庆揭牌了影创科技集团MR产业应用中心。与此同时，航空、工业、智慧文博、医疗、电力、体育、文旅、新零售、建筑等十家企业与影创科技签署了战略合作协议。影创科技集团董事长孙立表示，将把重庆影创作为集团的行业应用中心，打造最前沿的科技产业链，形成行业专业化和大众化的示范应用。 渝中区人民政府副区长乔宏表示，影创科技在混合现实领域拥有深厚的人才和技术优势。此次揭牌是影创科技集团拓展文旅、医疗、教育等领域的重要举措，为混合现实产业的发展带来创新动能。重庆影创总裁周舜表示，影创科技将深入更多细分行业，并与合作伙伴进行深度合作，形成丰富的产业生态。 华夏云融航空科技、重庆机电智能制造、重庆巴陆科技、重庆声光电智联电子、高斯贝尔数码科技、成都卫轩数字科技、重庆鑫泺源智能科技、中鼎天下文化科技、广州小栗子科技、重庆上丞科技、重庆筑云科技签署了与重庆影创的战术合作协议。附近签约仪式上，中鼎天下董事长张晋鹏表示，并探讨了新项目的合作。影创科技集团致力于为各行业创造多元的XR内容，用混合现实的力量赋能智能化新时代。

近期，美国专利及商标局公布了一批全新的AR/VR专利。其中包括了一系列来自Magic Leap、Facebook、Microsoft、Apple和Google的专利。这些专利涉及到的技术包括蓝光调整、虚拟现实和增强现实系统、头显设计、磁场传感器、扫描显示器、光栅结构、混合现实指南、空间锚定、全息图、可调透镜、视频帧编解码器架构、引导用户注意力、位置识别和阴影生成等方面。这些专利展示了这些公司在AR/VR领域的创新和发展。示例方法涉及在图像中插入内容，例如骨骼关节。方法包括确定可插入位置，生成边界框，并根据骨骼关节确定平面的阴影中心点位置。另外，阴影实体的渲染可以部分基于阴影中心点位置确定的像素值。谷歌专利描述了一种用于检测抖摇事件的系统，该系统通过接收用户输入数据引起虚拟相机运动，并检测与用户界面相关的抖摇事件。高通专利描述了一种语言翻译的方法，通过识别增强现实环境中的声音信号和应用特征来提供声音信号的自然呈现。该专利还描述了在移动平台上提供沉浸式扩展现实体验的系统和方法，通过传感器测量值追踪用户和移动平台的姿态。索尼专利包括生成头相关传递函数数据集、优化阴影和显示控制装置的方法与系统。另外，索尼的专利还涉及在线游戏服务中的事务性内存同步。

欧洲循环经济社交电商平台Lablaco宣布将于8月27日通过微软旗下VR社交平台AltspaceVR举办2020循环时尚峰会（CFS 2020）。这是一场以联合国2030年可持续发展目标为指导的会议，将在10月3日至4日的巴黎时装周期间举行，旨在探讨时尚领域的可持续发展。该峰会将利用Unity的实时3D技术制作，并通过AltspaceVR平台呈现给观众。参与者只需佩戴Oculus头显即可在虚拟峰会现场与来自世界各地的行业领导者互动，这是虚拟现实技术在时尚峰会领域的首次尝试。峰会的目标是影响行业领导者和决策者，建立一些新系统来解决时尚行业在社会和环境方面的影响。通过虚拟现实技术，设计师们能够在虚拟模特上展示作品，并为观众提供全新的时尚体验。AltspaceVR、Oculus、联合利华和Unity都将加速行业创新，这次峰会将为更多参与者提供体验新技术在现实世界中应用的机会。

Facebook在OC6上首次发布了社交VR体验Facebook Horizon，允许用户在虚拟现实中与朋友一起探索、游玩和创作。Facebook已经与一些早期创作者进行了Horizon的测试，并将从候补名单中邀请合适的用户参加邀请限定测试版。Horizon是一个由社区设计和构建的日益扩大的虚拟体验世界，用户可以使用Horizon创作工具构建他们想要看到和参观的任何内容。Horizon的安全和隐私方面也备受关注，用户可以进入个人安全区域，在其中静音、屏蔽或报告其周围的用户和内容。如果用户静音、阻止或报告某人，受过培训的安全专家可以远程观察和记录情况，以确保用户的安全。最后，Facebook还将增加一个功能，让用户在Horizon中更容易提交报告。邀请限定测试版将首先在美国和加拿大的Oculus Quest和Rift平台上推出。

Oculus Medium是一款VR创作工具，它具备直观操作、精确建模和丰富工具等特点。于2019年12月，Adobe正式收购了Medium及其相关技术和团队，并一直致力于优化和改善用户的创作体验。现在，名为Medium by Adobe的新版本工具已经免费上架。新版本根据社区的反馈进行了一系列优化和补充，例如可以创建更复杂的雕刻，锁定或解锁层时体素数据将从内存中移除/恢复而不更改渲染网格，还可以导入雕刻文件到当前雕刻会话中。其他改进包括Worldspace捕获摄像头和导出功能的提升。而在性能方面，Adobe进行了主要的改进和错误修复。完整的版本说明可在Oculus Store页面上查看。

新加坡南洋理工大学和澳大利亚悉尼理工大学最近共同开发了一种新的机器学习架构，旨在通过分析可伸缩应变传感器捕捉到的图像，以高精度识别手势。该架构的灵感来自人类大脑，能够综合整合视觉和体感信息来实现高精度的手势识别。研究人员通过设计和制造可伸缩的舒适传感器，改进了传感器的数据质量，开发了一种生物启发式的体感视觉学习架构，类似于大脑中的体感-视觉融合结构。该架构还使用稀疏神经网络来融合特征，复刻了大脑多传感神经元是如何表示视觉信息和体感信息之间高效初始交互。初步评估结果显示，该架构优于单模态识别方法，能够更准确地识别人类手势。这种大脑启发式架构有望在医疗机器人、虚拟现实和增强现实系统等领域得到应用。研究人员的下一步计划是根据视觉和传感器数据的仿生融合构建一个VR和AR系统。