Roadtovr

Meta首席执行官马克·扎克伯格向EssilorLuxottica展示了Meta手腕佩戴的XR控制器原型。EssilorLuxottica是持有Ray-Ban Stories相机眼镜及多个奢侈眼镜品牌的意大利公司。这一举动表明Meta对该技术作为未来XR输入设备的潜力非常有信心。扎克伯格在Instagram上发布了原型照片，并向EssilorLuxottica的总裁兼首席执行官莱昂纳多·德尔韦基奥展示了该设备。虽然该原型与公司去年公布的相似，但也有一些差异。 该手腕控制器是在Meta收购CTRL-Labs的基础上开发的，利用电肌图（EMG）传感器数组检测手部肌肉的电信号。这一技术的更小、更精细版本可能具有更大的价值，因为未来的AR眼镜用户无需使用笨重的控制器，也无需完全依赖光学手部跟踪，而后者无法提供触觉反馈。 去年末，Meta与EssilorLuxottica合作推出了Ray-Ban Stories眼镜，这是Meta希望为未来智能、时尚AR设备铺平道路的首款产品。Ray-Ban Stories类似于Bose Frames和Snap的眼镜产品，非AR或智能眼镜。随着Meta表示将在2024年推出四款新的VR头显，未来几年的XR设备会有更多选择。

据NVIDIA的研究部门和斯坦福大学的一组研究人员发表的一篇论文介绍，他们展示了一副薄型全息虚拟现实眼镜。这种显示器能够显示真实的全息内容，解决了视差-对焦问题。尽管该研究原型显示器的视野较小，但研究人员声称很容易实现120°的对角视野。这篇论文提前发表于即将举行的SIGGRAPH 2022会议之前。 传统的虚拟现实头盔受到光学约束，显示器必须与透镜保持一定距离才能使图像聚焦，因此头盔尺寸一直没有太大改进。为了解决这个问题，NVIDIA和斯坦福的研究人员构建了一个全息显示器，使用空间光调制器和波导来取代传统透镜。 这个团队建造了一个大型实验模型，展示核心方法，并尝试不同的算法来实现最佳的显示质量。他们还建造了一个紧凑的可佩戴模型来展示其形态。相比于此前的研究，NVIDIA和斯坦福的全息眼镜项目的整个显示器厚度只有2.5毫米，比现有的项目薄。 然而，该研究的局限性在于可佩戴系统的视野和眼盒都很小，无法用于实际的虚拟现实头盔。研究人员表示，视野的限制主要是因为他们实验性地组合了不完全适配的新型元件。他们指出，选择兼容的元件可以显著扩展视野。一组来自斯坦福大学的研究人员开发了一种新的超薄全天佩戴虚拟现实（VR）显示器。他们通过使用空间光调制器和GP透镜来扩大视野，并通过眼球追踪来调整观看范围。这项研究旨在促进全天佩戴VR显示器的研究和工程发展。 该显示器使用了2英寸的空间光调制器和15毫米的焦距GP透镜，可以大幅度提高视野。通过添加眼球追踪，研究人员成功将观看范围动态扩展到8毫米。然而，由于不同用户之间的观察距离和眼镜佩戴方式的变化，8毫米可能仍然对实际使用来说过小了。 研究人员认为，眼睛盒的大小与空间光调制器的像素间距直接相关，而视野与空间光调制器的整体尺寸相关。他们希望通过这项研究促进与传统眼镜相媲美的超薄全天佩戴VR显示器的发展。 这项研究的论文由Jonghyun Kim，Manu Gopakumar，Suyeon Choi，Yifan Peng，Ward Lopes和Gordon Wetzstein撰写。

热门的方块节奏游戏《Beat Saber》在其付费DLC《电子混音带》中推出了12首新曲目，涵盖了近20年的电子音乐内容。这款游戏由Meta旗下的开发商Beat Games开发，他们在上个月末的Meta Quest Gaming Showcase上预告了这个DLC。现在，该工作室突然在所有支持的VR头显上推出了付费DLC。《电子混音带》提供了10首歌曲，总售价为13美元。《Beat Saber》持续不断的付费和免费DLC使得该游戏在Quest和PSVR平台上一直稳居最受欢迎的VR游戏排行榜前十名。今天推出的《电子混音带》套装似乎预示着更多DLC的推出。多亏了Meta雄厚的财力，《Beat Saber》中包含了来自知名艺术家的内容，例如Skrillex、BTS、Green Day、Timbaland、Linkin Park和Imagine Dragons，还有来自《Interscope音乐包》的歌曲，如Kendrick Lamar、OneRepublic、Limp Bizkit和Maroon 5。

谷歌宣布收购了微型发光二极管(µLED)设计公司Raxium，以推动其XR微显示器的发展。这项收购于今年3月被报道，Raxium专注于构建用于AR和VR头盔的微显示器。谷歌表示，Raxium将加入其设备与服务团队，为谷歌的消费设备开发工作贡献力量。人们认为，这一收购将使得谷歌能够提供更轻、更便宜的显示器，用于即将推出的AR设备。Raxium已将微显示器的µLED尺寸缩小到每个像素3.5µm，比常规Super AMOLED显示器小得多。谷歌高级副总裁Rick Osterloh表示，Raxium在迷你化、成本效益和节能高分辨率显示器方面具有专长，对谷歌的硬件投资将发挥关键作用。此举显示谷歌正在为将来推出某种类型的XR头盔做准备，并可能与苹果、Meta、微软和Snap等公司的设备展开竞争。此前，谷歌还收购了智能眼镜公司North和吸纳了微软HoloLens团队的首席光学架构师Bernard Kress。据报道，谷歌实验室目前正在开发一款名为“Project Iris”的AR头盔，预计将于2024年发货。

Meta Reality Labs的研究人员已经开发出了一款原型虚拟现实（VR）头显，配备了定制的加速器芯片，专门用于处理AI处理。这使得公司的真实感编解码阿凡达能够在独立头显上进行渲染。该公司早期版本的编解码阿凡达研究由NVIDIA Titan X GPU支持，但公司现在正在研究如何在低功耗独立头显上实现编解码阿凡达。他们发布的一篇论文透露，Meta Reality Labs已经创建了一款使用7nm工艺构建的定制芯片，专门用于编解码阿凡达。 该芯片具备神经网络加速器，由1024个乘加阵列、2MB片上静态随机存储器和32位RISC-V CPU组成，体积仅为1.6mm²。这款芯片通过加速编解码阿凡达的工作负载中的一个密集部分，提高了处理速度，同时降低了功耗和热量。然而，通用CPU仍负责解码过程和渲染阿凡达的可视化效果。 虽然Meta的编解码阿凡达在独立头显上运行，但该研究还有待解决如何处理阿凡达图像渲染的问题。目前还不清楚在独立头显上能提供多少真实感。Abrash最近讲述了新计算架构的实际应用。推动科幻XR视觉成为现实的下一步是什么？他说，从高度集中的处理转向更分布式的处理对于满足这些头戴式设备的功耗和性能需求至关重要。 可以想象，许多XR特定功能都可以受益于专门设计加速这些功能的芯片。空间音频，例如，对于增强沉浸感而言在XR中都是非常理想的，但逼真的声音模拟在计算上非常昂贵（更不用说耗电了！）。位置追踪和手势追踪是任何XR体验的关键组成部分-在这个领域，将硬件和算法一起设计可能会带来很大的速度和功耗优势。 对XR科技前沿感兴趣吗？欢迎浏览我们的档案，了解更多有趣研究的详细分析。

Flirtual是一个约会应用，旨在通过匹配VR用户并在社交VR应用中促进约会。该应用的创作者表示，Flirtual是对通过VR相识并建立关系的趋势的一种编码。过去几十年来，虚拟世界中的玩家已经在在线游戏中建立虚拟友谊和合作关系，而VR为这种体验带来了更真实的感觉和更丰富的互动。Flirtual的创作者认为，由于增加的真实感，VR成为形成现实生活关系的理想平台。 Flirtual是一个在线约会应用程序，在Android、Windows和浏览器上可用。用户需要上传自己的虚拟形象来进行匹配，并根据兴趣和喜好进行社交活动。虽然匹配用户的过程可能看起来有些奇怪，但创作者表示，选择虚拟形象可以在VR约会中带来不同的个性和体验。 除了匹配用户外，Flirtual还在VR中举办速配和社交活动。该应用的创始人表示，他们希望通过Flirtual促进VR用户之间的配对，他们自己也是通过VR约会遇到自己的伴侣的。他们相信VR改变了生活，并帮助人们结识新朋友、度过隔离期并坠入爱河。

根据一份报告称，Meta即将推出的虚拟现实头戴设备项目Cambria的定价约为800美元。然而，Meta不同寻常地确认了该头戴设备的价格将更高，而不是简单地否认这一报告。Meta的发言人表示报告中关于800美元的信息不准确，并暗示实际价格将会大幅上涨。这种行动或许是为了避免设定错误的价格预期，因为该设备预计将于今年晚些时候推出。此前Meta透露，项目Cambria的定价不会像Quest那样力求最低成本，但实际价格超过800美元的消息还是让人感到惊讶。虽然对于一个独立的虚拟现实头戴设备来说，这个价格是昂贵的，但并非前所未闻。Meta可能会竭力接近或略低于HTC的Vive Focus 3面向企业客户定价为1300美元。这一事件与Oculus早期发生的类似情况相似，当时Oculus创始人拉基对于Oculus Rift的价格预期也出现了偏差。Meta显然认为，在头戴设备的定价讨论失控之前，提前解决这个问题非常重要。

根据《The Information》的一份报告，Meta计划在2024年推出四款新的虚拟现实（VR）头显示器产品。这四款新设备是Meta在推出增强现实（AR）设备之外的计划。其中第一款名为Project Cambria的头显预计将于今年9月发布，但其实际价格将会比此前报道的800美元显著提高。另外三款头显分别是代号为Funston的后续产品，预计于2024年发布，以及代号为Stinson和Cardiff的Meta Quest 2头显的改进版，分别预计于2023年和2024年发布。至于这些头显产品具体的特性目前尚不清楚。报告指出，Meta对VR和AR的投资不断加大，头显产品的发布速度也在加快。报道还提到，Meta可能已经准备好推出能将增强现实设备提升到新水平的计算架构，但具体细节尚未公布。

在今年底的IEDM大会上，Meta Reality Labs的首席科学家Michael Abrash介绍了该公司对实现科幻中增强现实眼镜的分析。目前市场上的AR眼镜虽然存在，但它们的体积和重量与普通眼镜相比仍有较大差距，无法满足真正眼镜大小的要求。为此，Meta认为需要对硬件和软件进行一系列的重大改进和范式转变。 Abrash提出了一种新的计算架构，以满足眼镜大小的AR设备的需求。该计算架构采用分布式计算方式，将计算操作分布在整个系统中，以减少无效的数据传输，降低功耗。其中，初步计算可以在摄像头传感器上进行，然后只传输关键数据，以减少能耗。Meta认为这一计算架构将为低功耗、高性能、小体积的XR传感器提供新的发展领域。Meta还指出，现有技术尚无法实现科幻眼镜的概念视频所展示的AR眼镜，但他们认为他们已找到了未来发展的方向。近日，虚拟现实（XR）行业专家Abrash分享了专为增强现实（AR）眼镜设计的低功耗、高性能相机传感器的原型。该传感器采用数字像素传感器阵列，能够同时捕捉每个像素的三个不同光亮级别的数字光亮值，并具备自己的存储器来存储数据，能够决定报告哪个值。这样的设计不仅可以减少功耗，还能大幅提高传感器的动态范围。Abrash分享了通过原型传感器捕获的样本图像，与典型传感器进行对比，展示了广泛的动态范围。 他指出，该广阔的动态范围对于未来的AR眼镜传感器至关重要，AR眼镜需要在各种光线条件下都能表现出色。即使使用Meta的原型传感器的HDR优势，其功耗效率也有显著提高，只使用5mW，并且具备可扩展性。 而Meta希望在传感器上进行更复杂的计算，例如实现深度神经网络的一小部分，用于眼动追踪和手势追踪等XR任务。 然而，要实现这一目标，还需要更多的硬件创新，例如开发超高密度、低功耗的存储器，而整个行业需要共同努力才能实现规模化。Abrash强调了芯片制造商正在开发MRAM技术对于AR眼镜的重要性。 通过综合考虑分布式架构和相关技术，可以在功耗、面积和形态方面取得巨大的改进。这些改进对让数十亿人能舒适、高效地使用AR眼镜是必要的。

明年，英国标志性定格动画组合华莱士和格罗米特将在Meta Quest 2上推出互动VR体验。这个名为《华莱士与格罗米特：大逃亡》的体验将带领粉丝们与角色一起度过一个夏日假期，体验华莱士最新的发明——汽车保姆。故事中，华莱士记错了日期，他们必须在半小时内火速前往国家的另一侧。该体验将于2023年在Quest 2上发布，由Aardman、Meta和VR先驱Atlas V共同开发，与Spheres和Gloomy Eyes团队以及No Ghost和Albyon合作制作。导演为Finbar Hawkins和Bram Ttwheam，得到华莱士和格罗米特的创作者尼克·帕克和创意总监梅林·克罗西汉姆的支持。Aardman的总经理肖恩·克拉克表示，这个项目为粉丝们提供了一个完全沉浸式的体验，使他们有机会走进华莱士和格罗米特的世界。《大逃亡》并不是华莱士和格罗米特第一次涉足沉浸式技术，Aardman在2020年已推出了面向支持AR的智能手机的《大修复》。