Nweon

nweon 文章

Quest Audio To Expression通过音频可实现逼真面部表情

Meta在其Horizon OS v71中推出了一项新功能,称为Audio To Expression音频到表情。这个功能通过使用音频流来生成面部表情,从而提供更加自然的面部动画。它可以捕捉到来自用户脸部其他部位(如脸颊、眼睛、眉毛、鼻子)的表情,而不仅仅是嘴部动画。Audio To Expression利用先进的人工智能、Meta的Face Tracking Blendshapes和麦克风音频流来实现这一功能。这项功能已经整合到Meta的Movement SDK中,并支持Quest 3s、Quest 3、Quest Pro和Quest 2设备。这个功能对于社交应用和企业协作平台具有很大的用途,可以提高用户之间的交流效果和真实性。此外,它也可以增加第一人称射击游戏等竞技游戏的吸引力。通过这项功能,使用者可以更简单、更节约资源地实现可信的、真实的面部表情,并建立更深层次的连接。有关更详细的信息,可以参考Meta的文档。
Quest Audio To Expression通过音频可实现逼真面部表情

2024年Meta Horizon OS的更新汇总

Meta在展望2025年之前发布了关于Horizon OS的一系列更新。首先,他们引入了追踪键盘API,提供了更流畅的应用内输入和改进的键盘追踪功能。其次,他们修改了在Meta Horizon Store发布的应用程序所必须遵循的VRCs指南,并更新了Asset 2 VRC,要求删除非允许的文本示例。此外,Meta还引入了Instant Placement机制,用于基本场景理解和更容易集成对象。他们还推出了Destructible Mesh功能,可以隐藏或移除应用程序中的对象。通过使用Scene Decorator工具,开发者可以放置和生成资源,为用户提供更具吸引力和动感的混合现实体验。此外,Meta还对System WebView进行了改进,提高了应用内Web体验的加载时间、稳定性和兼容性。最后,他们增加了360度预览功能,允许用户从各个角度探索应用的特性和功能,并添加了一个新的反馈选项卡,以便用户可以提交反馈和报告。
2024年Meta Horizon OS的更新汇总

支持多人MR体验,Meta发布Colocation Discovery和Group Sharing

Meta近日推出全新的API,旨在帮助开发者更轻松地为同一房间的多个用户创建共享混合现实体验。之前,使用Shared Spatial Anchors (SSA)创建和加入共定位体验一直是一个复杂的过程,需要用户通过大厅自组织派对,并要求主机用户与新加入的人共享所有房间锚。同时,当前的API要求开发者管理所有用户的用户ID。现在,支持Unity、Unreal和OpenXR的Colocation Discovery和Group Sharing正在改变这一切。这些功能通过支持蓝牙设备发现和允许用户基于组ID共享和检索锚,从而解决了之前的问题,开发者不再需要跟踪和管理用户ID。Colocation Discovery允许应用程序在约30英尺范围内发现相同应用运行的其他Quest设备,并建立协同会话。Group Sharing减少了开发者的开销,通过允许所有用户分享空间锚点到代表整个用户组的唯一标识符,消除了特定于用户的跟踪需求。同时,Colocation Discovery和Group Sharing的同时使用可以帮助用户快速进入共定位体验,降低复杂性和开销。
支持多人MR体验,Meta发布Colocation Discovery和Group Sharing

Meta推出Meta Motivo人工智能模型操控数字代理人动作

Meta最近发布了一个名为Meta Motivo的人工智能模型。该模型可以控制一个类似人数字代理的动作,并有望增强元宇宙体验。Meta针对无监督强化学习中的问题,开发了这个行为基础模型。Meta Motivo采用了一种新颖的算法,能够解决广泛的全身控制任务,包括运动追踪、目标姿势达到和奖励优化。与特定任务方法相比,Meta Motivo表现出更像人类的行为,同时显示出惊人的鲁棒性。团队表示,他们相信这项研究的未来可以为元宇宙中具身化的代理铺平道路,带来更逼真的NPC和新型沉浸式体验。详细信息请访问Meta的网站。
Meta推出Meta Motivo人工智能模型操控数字代理人动作

谷歌 vs Meta:Android XR将成就or破坏Meta的XR愿景

iOS和Android之间的开放性争论对于XR行业来说是一个热门话题。希望能够成为下一个计算平台的Meta希望能够与苹果竞争并坚持开放的理念。然而,谷歌进入了XR领域,使行业形成了一个有趣的情况。与此同时,除了性能和功能争论之外,平面应用也是决定Meta是否能抵抗来自谷歌和苹果压力的重要因素。尽管Meta的头显在游戏方面表现出色,但XR的潜力远远不限于游戏。作为一家专注于游戏的公司,Meta面临着更大的挑战。然而,Meta和谷歌之间的拒绝与建议表明,Meta将更加困难地将关键的平面应用引入其Horizon OS平台,而谷歌将更有希望吸引关键的沉浸式应用到Android XR平台。如果这种情况持续下去,Meta的头显可能会沦为一款只能玩游戏的设备,而不是通用计算设备。尽管Meta可以制造出更好的硬件,但对于XR平台来说,拥有核心的平面程序比硬件更重要。因此,对于Meta的XR愿景来说,这是一个确实存在的风险,目前还没有明显的解决方案。
谷歌 vs Meta:Android XR将成就or破坏Meta的XR愿景

斯洛伐克等为职校学生提供基于PICO VR的实践培训解决方案

斯洛伐克和捷克的职业学校正在探索使用虚拟现实(VR)头显作为学习木工和机械工程的起点。传统的课堂学习让学生失去兴趣,而且安全问题限制了动手实践的机会。因此,这些职业学校一直在思考如何弥合理论与实践之间的差距。基于VR一体机的培训方案因其安全、便携、低成本、可重复、可扩展和可定制的优势而迅速普及。斯洛伐克的STTA和捷克的WRDATACENTRUM使用PICO头显为职业学校的学生提供经济高效的学习方法。学生通过逼真有趣的虚拟现实环境进行学习,这种解决方案已逐渐获得职业学校的认可。据悉,目前斯洛伐克有40%的木工和机械工程学校正在使用这种解决方案,而捷克则有10%。展望未来,团队将继续推广这种沉浸式学习培训解决方案,帮助学生更好、更安全地掌握相关技能。
斯洛伐克等为职校学生提供基于PICO VR的实践培训解决方案

SyncVR Medical为肩周炎患者提供VR康复治疗解决方案

XR Medical希望通过使用PICO头显来重新定义肩周炎患者的治疗过程。他们将身临其境的趣味游戏与医疗专家指导的康复动作相结合,使原本痛苦的理疗会话变得轻松愉快。例如,一位患者使用SyncVR Fit at Home应用进行虚拟水果采摘活动,结果她感动得流下了眼泪并举起了手臂,表示感觉恢复了。“XRM Medical”表示,他们不断开发VR解决方案是为了造福有需求的患者,而PICO头显非常棒,符合医疗保健需求。PICO也表示,他们很高兴PICO头显能够帮助患者专注于沉浸式XR体验,而不是疼痛,使治疗过程更吸引人、更有效。
SyncVR Medical为肩周炎患者提供VR康复治疗解决方案

这家信托机构为老年人提供基于PICO VR的海洋探索体验

Ocean Conservation Trust海洋保护信托基金正在使用PICO G3头显,以帮助人们身临其境地感受难以触达的海洋世界。自The Ocean for All项目启动以来,已有500多人与海洋建立联系,超过80%的人表示玩得非常开心。该项目旨在让人们能够访问平时难以接触的海洋环境,并激发重要的回忆行为。通过和海洋探索者聊天,可以看到分享和回忆的快乐笑容。超过90%的人表示从中获得了新的收获。该项目利用PICO头显在学校和养老院展示海洋生物,激发联系和福祉,并帮助人们爱上大海。
这家信托机构为老年人提供基于PICO VR的海洋探索体验

PICO开启VR直播跨年庆典活动,礼品赠送不断

PICO最近启动了VR直播跨年庆典活动。用户可以通过完成任务,如观看直播、送礼和签到,参与抽取实物和特权奖励,包括耳机、键盘、PICO泡棉、鼠标垫和笔记本等。活动将于2024年12月31日23:59结束。此次活动提供了四种玩法。首先是通过完成任务参与抽奖,每天都会刷新任务,并有机会获得实用的奖品,还有2025进场秀和火蛇进场秀。其次,用户可以为主播投票,通过花费1钻石为主播送出小心心,即可获得24小时的发言高亮特权,投票还可以增加主播的VR人气值。第三,每周黄金时段会安排精彩的PK内容,让主播进行激烈的对决。最后,活动期间有空间币派送任务,所有用户都可以参与,每天首次抽取都会全返。VR直播跨年庆典已经开始,活动截止日期是2024年12月31日23:59。
PICO开启VR直播跨年庆典活动,礼品赠送不断

设计师探索模拟刀剑、球拍、鱼竿、乐器等VR控制器概念

韩国设计师Minkyu Oh提出了一种名为Cogito的概念形变控制器,旨在模拟剑刃、方向盘、网球拍、鱼竿等现实世界物体的形状。这款形变控制器可以让用户随意扭曲和伸展,从而模拟现实世界物品的关键握持特征,实现更高程度的沉浸感。为了获得匹配的触感,每个形变工具的特征由长度、厚度和曲率定义,团队通过建模数据和现实测量值进行模拟分析。这是一项纯概念设计,尚不确定其可行性和实际应用效果。
设计师探索模拟刀剑、球拍、鱼竿、乐器等VR控制器概念