Nweon

Meta最近发布了一项名为Application SpaceWarp（AppSW）的优化技术，旨在为开发者提供额外的计算能力。在初步测试中，AppSW为应用程序提供了高达70%的额外计算能力，而且几乎没有感知到的缺陷。AppSW的关键之一是通过应用程序生成运动矢量和深度，使应用程序能够以半帧速率运行，而合成器则可以以全帧速率进行工作。然而，开发者发现一个问题是AppSW只能为投影层生成运动矢量和深度，而无法应用于非投影层。为了解决这个问题，Meta提出了利用DirectProjection和Compositor Layer SpaceWarp来优化AppSW的方法。DirectProjection通过直接投影合成器层的完整几何信息到最终图像的方式来解决问题。而Compositor Layer SpaceWarp则利用外推的原理根据最近的头部姿势推断出合成器层的姿势。Meta表示这些优化技术对于合成器层非常重要，可以避免在应用程序以较低帧率运行时出现卡顿现象。DirectProjection和Compositor Layer SpaceWarp是AppSW的有用补充，当使用AppSW时它们会自动启用。

emoji表情符号是一种在计算设备中表达情感的机制。它可以以静态或动画的形式出现，并通常以面部或其他传达情感的图像的形式出现。用户可以在各种通信媒体上使用emoji，例如电子邮件、聊天或短信。 emoji也可以在虚拟空间中共享。在虚拟空间中，用户可以使用手持控制器通过头显显示的用户界面进行交互并共享表情。然而，导航用户界面可能会分散用户的注意力，降低共享虚拟空间的沉浸感。微软在专利申请中介绍了一种基于铰接式手势追踪数据来识别手势并显示相应表情emoji的技术。通过识别用户的手势，系统可以在虚拟空间中呈现与手势相对应的emoji，实现自然直观的共享表情机制，而不需要输入设备操作和用户界面导航。铰接式手部追踪数据包括用户手的多个关节的位置和旋转数据，允许准确检测多种与emoji相关的手势。用户之间可以通过发送指令共享emoji在虚拟空间中的位置，可以通过直接通信信道或间接网络连接进行通信。

柔性致动器在机器人和可穿戴触觉领域越来越受欢迎，因为它们比刚性执行器具有更好的接触柔顺性、更低的重量和阻力。目前，柔性致动器的动力源包括流体驱动、静电驱动、电磁驱动和热驱动。然而，目前使用的恒定流体压力控制（CFPC）方法存在一些局限性，如有限的动态范围、响应缓慢、低压控制分辨率和非自然的触觉交互。为了解决这些问题，美国西北大学和Meta提出了一种新的流体驱动方案，即恒定流体质量控制（CFMC），通过精确控制阀门的定时来调节致动器内的流体质量。CFMC具有更大的动态范围、更快的响应时间和更自然的触觉交互，但需要额外的设备和更复杂的控制策略。实验结果表明，CFMC可以增加柔性致动器的动态范围，缩短响应时间，并实现模拟压力控制，从而提供更自然的触觉反馈。研究人员还使用基于神经网络的算法实现了CFMC的模拟压力控制，并泛化到不同的致动器。未来研究将进一步扩展CFMC的应用，探索其在刚度触觉和闭环控制方面的潜力。

美国菲力尔宣布与美国国防威胁降低局合作，开发新型战场威胁地图和可视化工具。该技术通过传感器数据对危险物质威胁进行数字映射绘制，并通过混合现实查看其位置。这项技术支持智能手机、平板电脑和平视显示器，尤其是基于微软HoloLens的集成视觉增强系统（IVAS）。美国菲力尔与合作伙伴共同开发能够精确定位、测量和映射化学、生物、辐射和核（CBRN）危险，并在混合现实中查看的软件，以提供士兵必要的态势感知。该项目由美国国防威胁降低局的数字作战空间管理署资助，旨在优化实时CBRN态势感知，使用户能够看到和避免化学和生物危害。此外，该项目还将使用户在侦察和去污任务中直观地感知化学生物威胁，并获得实时决策支持，同时为美国陆军的自动去污工作奠定人工智能和混合现实基础。美国菲力尔表示，他们非常自豪能够负责这项任务，帮助士兵直观地看到危险的化学生物威胁，并提高与IVAS和自动机器人去污相关的能力。

美国微型显示器开发商高平电子宣布已获得美国陆军一份价值1980万美元的目镜组件订单。该公司将为美国陆军提供视频透视增强现实（AR）光学模块的FWS-I热成像瞄准器系统。FWS-I热成像瞄准器系统使用了高平电子的CyberDisplay LCD和定制Pancake光学元件。该系统能够通过AR视频透视功能，将武器瞄准线和热图像无线传输至士兵的目镜，以提供在低视环境下的态势感知。这是高平电子第二份FWS-I目镜组件订单，交付预计在2022年第四季度完成。高平电子副总裁比尔·马福茨表示，迄今为止，公司已经收到总额超过5000万美元的FWS-I目镜组件生产订单，这证明了公司在设计和制造复杂微型显示模块和组件方面的能力。

Spatial是一家AR/VR协作平台开发商，它最近宣布将转型为元宇宙平台，支持NFT展览、品牌体验和会议等文化活动，并提供Web、移动和AR/VR设备的支持。该公司已完成一笔2500万美元的融资，总融资额已达到5000万美元。转型后，Spatial的团队将致力于成为将NFT创作者与社区和收藏家联系起来的3D枢纽，并帮助为创作者打造首个开放和免费的元宇宙平台。该公司表示，这一转型决策是因为80%的用户通过Web和移动端访问Spatial，而AR/VR头显用户的比例已从2020年的80%降低到20%，并且大多数用户都是NFT创作者、艺术家和收藏家。Spatial表示，他们相信元宇宙将远远超出会议空间，他们希望建立一个包容和开放的元宇宙，让艺术家和创作者可以在多个平台自由移动。最后，Spatial补充道，他们正在为创作者和艺术家建立"元"语言，并且已经看到了用户用量的四倍增长，新融资将进一步加速他们提高互联网的沉浸感、社交感和乐趣感的使命。

Meta在庆祝即将到来的美国假期季期间举办了一次Quest Day活动。用户可以通过questday.fb.com参加该活动，由Dr. 6DOF和他的助手Questy主持一系列活动。在活动中，Meta免费赠送了500台Quest 2头显以及各种定制礼品，包括毛绒公仔吉祥物、可穿戴外设、以《Wraith: The Oblivion – Afterlife》为原型的姜饼屋、基于《Beta Saber》的定制LED灯、基于《Beat Saber》的T恤、智能水杯等。这些礼品是限量派送，每位参加者只能选择一款礼品，并且必须年满18岁且居住在美国。MetaQuest创意总监表示，Quest社区是最激情的粉丝群体之一，他们不断提出自己的创意和建议，Meta受到启发，希望通过Quest Day向粉丝们回馈关爱。为了庆祝Quest Day，Meta团队与Deeplocal公司合作，将创意体验实物化为日用之物，与用户的日常生活和激情相连接。

谷歌正在招聘一支专注于为创新AR设备构建软件的“AR操作系统”团队。这是谷歌继谷歌眼镜之后的又一次AR设备布局，而像Meta、微软和苹果等巨头也都在积极进入AR领域。据招聘信息显示，该团队的目标是构建控制和管理AR产品硬件的软件组件，将是谷歌新增AR产品组合的第一个使用新硬件的软件团队。团队由马克·卢科夫斯基负责，他曾在Meta/Oculus供职并参与了Android的开发工作，之后在微软工作了16年。团队开设的职位要求包括对Linux内核和驱动程序模型的理解，以及实时操作系统开发经验。其中，一份职位针对摄像头高级软件工程师要求负责创新AR设备的摄像头组件软件，另一份职位针对高级软件开发技术负责人要求负责构建嵌入式实时平台的输入框架。此外，尽管大多数职位设在美国，但也有涉及加拿大滑铁卢的职位，滑铁卢是谷歌在2020年收购的AR眼镜厂商North的总部所在地。

随着Oculus和HoloLens等头戴设备的出现，AR/VR技术正在迅速发展。AR/VR设备有望从根本上改变我们的日常生活和社会。其中一个基本挑战是通过头戴式摄像头实现对用户活动的机器理解。现有的动作识别方法存在一些局限性，包括昂贵的训练成本和无法涵盖所有潜在动作。为了解决这些限制，研究人员提出了一种利用自监督学习来训练CNN的方法。他们使用头部运动数据作为自我监控信号来进行自中心行为识别。通过对比实验结果，他们发现头部运动信号对动作识别具有优势，并设计了一种简单而有效的SSL方法，可以学习自中心视频表示。实验结果表明，学习到的表示可以在厨房和以狗为中心的活动等任务中取得有效结果。研究人员还探讨了视频表示是否已经捕捉到头部运动信息的问题，并发现头部运动信号仍有改进视频表示的空间。总体而言，该研究表明头部运动数据对于提高AR/VR视频表示具有潜力，并提供了一种有效的SSL方法来实现自中心动作识别。

Oculus Avatars SDK已改名为Meta Avatars SDK，并已向Unity开发者开放。Meta在今年4月发布了全新的Avatars，带来了表现力更强，定制性更高，多样性更广的全新版本虚拟化身。全新的Avatar Editor允许用户单独改变各个面部特征，包括眼睛、鼻子、嘴巴等，还增加了新的体型、发型、胡须、妆容和服装等。全新版本的Avatars支持数以亿计的组合。Meta正在扩展Avatars的应用支持，以创造一个更为统一、更有凝聚力的社交空间。虚拟化身的动作比以前更为流畅，这得益于机器学习的运动预测技术，Meta Avatars能够解释手部追踪、控制器追踪和音频输入，以驱动高表现力虚拟化身模型。Meta Avatars SDK包含Unity插件、参考化身和文档，并可通过下载页面获取。如果有问题或反馈，可以访问开发者论坛。