Nweon

卡内基梅隆大学的研究人员开发了一种名为Pix2pix3d的机器学习工具，可以帮助初学者和专业设计师创建各种3D虚拟模型，包括定制家具和游戏内容。这个工具允许用户使用生成式人工智能工具创建逼真的3D表示，只需提供简略的素描草图，系统就可以生成相关的3D模型。与其他2D图像工具不同，Pix2pix3d是一种3D感知条件生成式模型，用户可以从标签图或更详细的信息中输入2D草图，然后生成几何、外观和标签的3D体三维表示。一旦生成3D图像，用户可以通过擦除和重新绘制原始2D草图来实时修改，并且从多个视点来看都是准确的。这种交互式编辑功能使得用户可以轻松地设计、测试和调整产品。Pix2pix3d已经接受了包括汽车、猫和人脸在内的数据集训练，并将继续扩展模型能力，未来可以被应用于设计家具、定制物品和为电影添加效果等领域。

Meta在一项名为“以空气传导换能器驱动的组织换能器音频系统”的专利申请中介绍了一种改进音频内容的音频系统。该系统包括组织换能器传感器，其中组织换能器包括空气传导换能器和一个或多个组织换能器（如软骨传导换能器和/或骨传导换能器），用于驱动组织振动以产生声压波。音频系统还包括换能器阵列、传感器阵列和音频控制器。换能器阵列包括多个换能器，可以是扬声器、组织换能器或组织换能器耦合到用户的头部以产生声音。传感器阵列用于检测局部区域内的声音。音频控制器处理声音描述信息，并控制音频系统的操作，如定位声源、生成音频滤波器等。 此专利申请最早于2021年9月提交，并于最近被美国专利商标局公布。

传奇开发者约翰·卡马克在参加Meta首席技术官安德鲁·博斯沃思的“Boz to the Future”播客专访中表达了对虚拟现实（VR）的乐观态度。卡马克认为未来VR将取代所有其他设备，但关键在于改善用户体验而不是硬件。他强调VR应该是轻便、舒适、便宜，要能够实现即时的体验，拿起头显就能进入其中。他认为VR可以取代电视、平板电脑等设备，提供巨幕影院、Android应用程序等功能。卡马克表示，所有实现VR突破所需的要素已经存在，关键是去实现而不是等待新的硬件技术。他对未来的发展持乐观态度，并认为Meta目前具有优势，但最终能否保持领先要看Meta自身。在播客中，卡马克还讨论了人工智能、编程、优秀软件构建和用户快乐等话题。

据著名苹果消息人士郭明錤表示，尽管苹果有望在今年WWDC大会发布首款XR头显，但他认为这并不意味着苹果能够在一开始就重现“iPhone时刻”。原因包括经济前景、为追求量产而在重量等规格方面的妥协、生态应用准备以及价格较高等。他在Twitter上指出，这次苹果的XR头显发布会是向投资者证明AR/VR有望成为下一个消费性电子明星产品的最后希望。此外，他还表示Meta Quest Pro的累计出货量仅为30万台。尽管苹果的XR之路遭到质疑，但公司首席执行官库克在早前的一次专访中表示，他认为AR/VR可以极大地加强人与人的交流，并帮助人们做到以前无法做到的事情。库克表示，苹果在质疑中创新并取得成功，他们希望掌握核心技术，因为只有这样才能实现创新。郭明錤还提到了苹果的发布会和Quest Pro的销售/出货数据更新。对于Quest Pro的销量低于预期，Meta已决定不生产第二代Quest Pro。

根据Piper Sandler的调查数据显示，美国青少年对虚拟现实（VR）似乎并不感兴趣。调查的对象有5690名青少年，其中只有29%拥有VR设备，每天使用VR头显的人只有4%，每周使用的人占14%。此外，只有7%的青少年表示计划购买VR头显，而52%的受访青少年表示不确定或不感兴趣。这一调查结果表明，虽然大型科技公司在VR技术上投资了大量资金，市场上也有低成本的头显推出，但VR硬件和软件并未受到公众的热捧，特别针对关键的青少年群体而言。Piper Sandler分析师指出，这些数据显示出虚拟现实仍处于早期阶段，比起智能手机，这种设备并不重要。这些有趣的数据或许也对苹果首款VR/MR头显发布前景产生了影响，即使已经拥有VR设备的青少年也对其缺乏兴趣，这可能预示着苹果VR/MR产品面临的挑战。

AR隐形眼镜厂商Mojo Vision在2023年1月宣布转型，放弃了AR眼镜产品Mojo Lens的研发，转而专注于开发Micro-LED技术，并宣布了75%的裁员。然而，最近Mojo Vision宣布完成了由NEA和Khosla Ventures领投的一轮2240万美元的融资。该公司正在开发像素密度高达28K、亮度超过100万尼特的Micro-LED显示器，并称其为“新A轮融资”。此外，Mojo Vision的Micro-LED业务高级副总裁Nikhil Balram将接任CEO。在加入Mojo Vision之前，Balram曾担任AR公司EyeWay Vision的CEO，并参与了谷歌的多个硬件项目的研发工作。Balram表示，他们最初开发了世界上最小、密度最高的动态Micro-LED显示器，并将这一创新应用于下一代显示器。

Luma AI最近发布了一个NVIDIA NeRF插件，可帮助开发者在Unreal 5中进行实时三维渲染，无需修改几何结构或材质。开发者可以使用这个插件简化生产流程，品牌和娱乐体验制作者则可创建定制内容，如沉浸式媒体体验。Luma AI的“Video-to-3D”API软件允许XR开发者以低成本生成NeRF数字孪生，将其导入Unreal 5，从而在VR体验中获得逼真的资产。此外，Luma AI还提供了四个Blueprint来帮助Unreal用户将资产导入虚拟世界。 在NeRF领域，除了Luma AI，NVIDIA和Epic Games也开发了相关解决方案。NVIDIA的Instant NeRF利用人工智能网络创建对象或环境的完整三维捕获，并提供工具将三维内容导入Omniverse套件，用于创建企业级沉浸式解决方案。而Epic Games则通过RealityScan提供体积捕获解决方案，支持用户通过手机摄像头创建高质量的数字孪生，并通过AR可视化和反馈减少输出错误。Luma AI最近获得了约2千万美元的融资，其中包括了NVIDIA在内的投资者。

Meta宣布与Slow Studies Creative合作推出「Spark Indigenous Augmented Reality Creator Accelerator」计划，旨在培育加拿大原住民的AR创作者。这个为期五周的孵化器计划将向10名加拿大原住民创作者提供Meta的增强现实体验开发平台Spark的动手培训，帮助他们将AR体验融入原住民的文化表达和故事叙述中。Meta旗下的增强现实体验开发平台Spark允许用户以充满创意和引人入胜的方式在Facebook、Instagram和Messenger上使用AR功能。Spark目前每月允许超过7.5亿人体验AR。此计划旨在帮助原住民成为新兴数字空间的文化管理者，打破阻碍代表性不足社区拥抱数字空间的壁垒，确保原住民的声音和文化被全世界听到和看到。计划为参与的原住民创作者提供培训和支持，帮助他们学习如何构建AR体验，并使用免费的AR设计工具包Spark Studio将自己的创意融入生活。活动结束后，Slow Studies Creative将为任何有兴趣学习建立AR体验的人提供教程。

映维网Nweon于2023年4月5日报道，利用OpenXR Toolkit，通过Air Link无线接入PC时，Meta Quest Pro头显可实现眼动追踪，并启动动态注视点渲染功能以减轻计算负载。目前支持的PC VR游戏包括《Hubris》、《The Light Brigade》和《iRacing》等作品。OpenXR Toolkit在游戏和OpenXR运行时环境之间创建了一个中间步骤，以与操作系统、驱动程序和VR合成器进行通信。开发团队Flat2VR表示，OpenXR Toolkit是一个优秀的工具，可为OpenXR游戏开启基于眼动追踪的注视点渲染。要在Quest Pro头显支持这些功能，选择官方Oculus运行时非常重要，选择Steam VR作为OpenXR运行时将无法启用眼动追踪。另外，勾选“Eye tracking via Oculus Link”复选框和激活“Developer Runtime Features”也是重要的先决条件。使用旧版OpenVR的游戏可以通过OpenComposite兼容，包括《American Truck Simulator 2》、《Elite Dangerous》、《F1 22》、《Pavlov VR》和《Subnautica》等作品。可以在OpenXR Toolkit的官方页面上获取更多信息。

波导技术厂商DigiLens最近推出了新一代的表面浮雕光栅SRG+，宣称它能够在优化效率、均匀性、视场和形状参数方面实现突破，并且可以以较低的价格实现量产。据介绍，SRG+工艺是DigiLens体三维布拉格光栅VBG技术的延伸，通过它可以产生一种没有残余偏置层的SRG结构，并且能够对光栅角度进行一流的控制，从而实现高效率和最小的"眼睛发光"和前向投影。DigiLens表示，这项技术可以以消费者价格点实现最高性能和最能被社会接受的波导显示器。SRG+的特点包括高纵横比、无偏置层等。DigiLens的光学工程高级副总裁阿尔斯泰·格兰特表示，通过SRG+，他们解决了传统SRG带来的挑战，并取得了前所未有的结构高度和超过10：1的纵横比，同时保留了低成本制造方法。康宁公司对于SRG+的潜力表示兴奋，认为它可以提高导光目镜的性能，为AR技术的未来提供关键的属性。