Nweon

苹果公司在一项新的专利申请中探索了通过手腕和前臂作为输入控制界面的方法。苹果认为现有的与数字环境交互的方法十分繁琐、低效和有限，需要一系列输入操作。因此，苹果希望创建一个更为有效的人机界面，将焦点放在手臂和前臂上。根据专利申请的描述，计算机系统可以检测手腕和前臂的位置、方向和朝向，根据不同的视点标准，在不同位置显示不同的用户界面对象。举例来说，通过将前臂朝向眼睛的不同方向，苹果的AR眼镜或VR头显可以投影不同的控制界面，方便用户对系统进行控制。该专利申请名为“Devices, methods, and graphical user interfaces for displaying applications in three-dimensional environments”，尚不清楚苹果是否会将该技术商业化并应用于实际产品中。 来源：映维网 图片来源：映维网

LIV是一款热门的软件，允许VR玩家录制自己在游戏中的混合现实视频。为了获得最佳效果，该工具通常需要额外的装置，如绿幕、网络摄像头或PC。然而，现在LIV团队正式发布了iOS版的应用程序，只需使用iPhone或iPad即可直接录制Quest视频，无需其他设备。LIV tv app目前处于早期测试阶段，用户可以通过iOS TestFlight免费下载，并将其托管至SideQuest。对于iOS设备，请使用5GHz的Wi-Fi链接。团队计划将其带到Oculus Store，并争取在今年年底发布Android版本。该移动应用包括两种模式：一种是录制第三人称视角的“MR模式”，另一种是从固定角度浏览游戏过程的“观众模式”。开发者表示，校准非常简单，只需将Touch控制器靠近iOS设备即可对齐物理摄像头和数字摄像头。目前只有11款Quest游戏支持LIV tv app，用户反馈该工具在遮挡效果上并不完美，但比以前更稳定。LIV曾在2020年发布过一个类似的Quest beta版本，但开发者承认该版本存在问题，需要大量支持才能继续运行。

VR音乐节奏游戏一直是一个热门题材，《节奏英雄》作为一款新的音乐节奏游戏，正式登陆Pico商店，支持Pico Neo 3，售价38.7元。游戏中，玩家需要随着音乐节奏舞动双剑，切开迎面而来的音符。游戏提供单机模式和双人对抗模式，并计划在未来提供合作模式。《节奏英雄》有数十款音乐可供选择，用户还可以自行导入本地歌曲。游戏提供简单、普通、困难、专家四个难度。游戏的开发商是广州丁香网络科技有限公司，该公司于2017年开设了旗下第一家线下VR体验店"VR+乐园"，目前在全国开设了多家门店，致力于潮玩群趴的VR娱乐品牌。

多年来，许多创意人士都认为3D创作既让人兴奋又让人生畏。虽然游戏开发者创造的幻想世界和电影的沉浸式3D视觉效果令人震撼，但人们普遍认为3D创作的技术要求太高，无法想象自己能在创作中应用它。然而，成千上万的公司发现，3D创作不仅带来了无限创作自由，而且速度更快、成本更低、更具可扩展性和可持续性，因此3D将成为下一代的创意媒介。为了帮助创意人士在3D领域取得成功，Adobe发布了Adobe Substance 3D Collection，这是一套可互操作的工具和服务，从项目开始到结束都支持3D创意。该产品利用人工智能的力量消除了3D设计的技术复杂性，提供了易于学习的工具和无障碍的平台，并提供了数以千计的模型、纹理、照明系统和其他资源。此外，Adobe还将推出Substance 3D Modeler，这是一个用于创建3D对象的工具，使用VR界面重现了雕刻粘土的有机感，可以在桌面端操作模型。Adobe相信，未来的创意体验将通过3D和身临其境的界面实现。

2021年计算机视觉和模式识别大会（CVPR）公布了一系列论文，其中包含了一些与增强现实/虚拟现实相关的论文。其中一篇论文介绍了一种自监督的方法，能够从RGB-D扫描中生成高质量的彩色三维场景模型。另一篇论文提出了一种基于视频的学习框架，可以根据音频制作具有个性化的三维说话人脸动画。还有一篇论文介绍了一种用于单目六维物体姿态估计的几何引导直接回归网络。其他论文涵盖了人体姿态和形状重建、阴影移除、光照估计等领域。这些论文利用深度学习和计算机视觉技术，提供了一些在XR领域中有潜力应用的方法和技术。

6月18日，在上海举行的2021虚拟与增强现实产业年会暨"金V奖"颁奖盛典圆满结束。小派科技创始人翁志彬获得2021年度杰出贡献人物奖。自2018年首届至今，该盛典已连续举办四届，成为XR产业内最具影响力的年度盛会之一，并获得了广泛好评。今年的"金V奖"共有300多家企业参与角逐，评选范围更大，评选机制更完善公正。专家评审团认为，翁志彬推出的旗舰版头显VISION 8K X将VR体验推向了极致，对VR/AR产业的健康发展做出了杰出贡献。小派头显在技术创新方面给人留下深刻印象，特别是对角200度超宽FOV视场角和单眼分辨率的原生4K，以及模块化设计带来的功能拓展性。翁志彬表示，小派将继续致力于高端VR头显的设计和生产，不断推动VR技术的发展，让VR成为通向元宇宙的方舟。

苹果公司在macOS Monterey操作系统中引入了一个名为“Object Capture”的全新API，该API使用户能够通过iPhone摄像头创建任意对象的3D模型。以前，创建3D模型可能相当困难，需要先进的相机和专用软件。然而，使用macOS Monterey和iOS 15，这个过程变得简单了许多。使用Object Capture API，用户只需要几分钟就可以捕捉和渲染整个3D模型的过程。 使用Object Capture API需要一个带双后置摄像头的iPhone或iPad来捕获深度数据。用户需要通过从不同角度拍摄对象的多个图像来实现360度渲染。然后，将照片发送到运行macOS Monterey的Mac进行渲染。目前虽然还没有应用程序具有这个新功能，但苹果提供了一些示例代码供开发者使用。 Object Capture API可以以低质量或高质量渲染对象，并且用户可以选择按顺序处理图像或使用AI来确定图像的顺序。注意，这个API需要一台具有16GB RAM和至少4GB VRAM的Intel Mac或M1芯片的Mac。 通过Object Capture API，用iPhone捕捉图像并在Mac上渲染3D模型的过程非常迅速，不超过10分钟。结果显示，Object Capture API能够创建逼真的3D模型。 苹果的增强现实技术推动力持续增强，利用Object Capture API可以更容易地创建3D模型，并在更多方面推动增强现实技术的普及。

虚拟教育和培训平台ENGAGE的所有者VR Education Holdings（VRE）宣布正建设元宇宙ENGAGE Oasis，旨在成为“VR版领英”。此外，英国的Octopus Investment Limited等投资者将以1000万美元入股VR Education Holdings。VR Education Holdings成立于2014年，以《Apollo 11 VR》、《Titanic VR》和社交VR平台ENGAGE而闻名。CEO大卫·惠兰表示，VRE今年第一季度的营收已超过2020年全年，并计划在今年年底前将员工人数从现有的60人增加到100人。ENGAGE Oasis将在2022年上半年推出，作为一个虚拟的会面场所，帮助世界各地的企业、专业人士和大学生推广产品或服务，同时开展业务关系。ENGAGE Oasis是一种专为企业用例设计的VR元宇宙平台，支持加密货币、法定货币和NFT。Oasis的灵感来自电影《玩家一号》中的虚拟世界，用户可随时登录。ENGAGE Oasis将成为一个可以开展业务的数字城市，高管们可以相互联系并为各自的组织产生价值。目前，ENGAGE平台已吸引了100个客户，包括Facebook、雅培、华为、HTC、斯坦福大学、毕马威、MongoDB和美国国务院。ENGAGE Oasis计划于2022年上半年推出。

美国专利商标局公布了Facebook的一项名为“Feed-forward collision avoidance for artificial reality environments”的专利申请。该专利介绍了一种利用前置摄像头反馈来渲染物理对象相对位置的技术，以避免用户与物理环境中的物体碰撞。这种技术可以保持用户的安全并确保不间断的虚拟现实体验。 Facebook指出，由于虚拟现实系统中的内容与物理环境的物体尺寸和位置可能不一致，当用户进入虚拟现实系统时，他们对物理环境的心理模型可能变得模糊，从而增加了与物体碰撞的风险。为了解决这个问题，Facebook构思了一个虚拟现实系统，其中包括一个能够生成表示物理对象的叠加图像数据的物理对象叠加引擎，并通过前置摄像头提供视图反馈。叠加图像数据以一种匹配虚拟现实视图的方式生成，可以在用户接近物体时自动显示，或者根据用户的手动命令进行显示。用户可以利用叠加图像更新对环境的心理地图，并规划移动或其他行为，以避免与物体碰撞。 该专利申请于2019年12月提交，并于近期公布。

HTC Vive于6月10日在北京举行了“HTC Vive新品体验会暨开发者客户大会”。会上，HTC Vive软件产品与亚太开发者关系高级总监袁东介绍了Vive Focus 3在图像、性能、音效和输入方面的改进。Vive Focus 3是HTC Vive最新发布的一体式VR头显设备，采用了2.88寸双LCD显示器，单眼分辨率为2448 x 2448（双眼4896 x 2448），带来了更高的分辨率和更清晰的显示效果。袁东介绍了Vive Focus 3中采用的Multi-Layer渲染架构，该架构可直接通过OpenGL渲染文字内容到Display Buffer，只需一次纹理采样，提供更高质量的显示效果。此外，Multi-Layer渲染机制还可以定制不同场景环境下的文字内容显示，满足不同需求。虽然Multi-Layer渲染机制会增加一定的性能消耗，但它能够让文字内容显示更清晰，适用于视频字幕、文本显示等细节。