Nweon

nweon 文章

苹果专利分享XR环境中基于对象自适应的Avatar分层传输技术

苹果在最新专利申请中介绍了一种提高XR环境下多个用户Avatar数据传输质量的方法。该技术通过获取对象的表示数据并为不同质量层设定比特率,优化了编码过程,支持用户根据设备和网络条件订阅适合的质量层。此外,不同主体可能需不同的目标比特率,确保在各种情况下都能有效传输数据。这一方法有望改善在场通信中的用户体验,提供更灵活的数据管理。
苹果专利分享XR环境中基于对象自适应的Avatar分层传输技术

CART:基于分层自回归Transformer的可扩展图像生成方法

三星研究院提出了一种新型自回归图像生成方法,通过逐步添加细节,构建高质量图像。该方法从基础图像开始,通过迭代添加更精细的细节,改进了传统一次性生成整个场景的方法。利用边缘感知平滑技术,将图像分解为“基础”和“细节”两个组件,并通过变分自编码器在潜在空间中进行处理,使生成过程更具可控性和可扩展性。这种结构化迭代符合人类创作图像的自然过程,提升了高分辨率成像的质量与效率。实验结果显示,该方法有效降低了计算复杂性。
CART:基于分层自回归Transformer的可扩展图像生成方法

4DGS-Wild:单目视频动态场景的不确定性感知高斯泼溅重建

韩国首尔大学团队提出了一种新的4D Gaussian Splatting(4DGS)算法,针对单目视频中的动态场景进行新视图合成。研究引入不确定性感知的正则化来解决过拟合问题,同时结合扩散模型和深度平滑,以提高新视图合成的效果和训练图像重建质量。团队还提出了动态区域密度化技术,用于解决快速移动动态区域的高斯基元初始化挑战。尽管该研究在性能上超过了基线方法,但在随意录制的视频新视图合成方面仍有待提高,未来的努力将集中在优化正则化技术和动态区域一致性等方面。
4DGS-Wild:单目视频动态场景的不确定性感知高斯泼溅重建

DiVR:基于多模态Transformer的VR场景人体轨迹预测模型

法国蔚蓝海岸大学和普瓦提埃大学的团队利用CREATTIVE3D数据集,在VR场景中记录了各种任务的轨迹,以研究人类运动预测。他们提出的DiVR模型基于Perceiver架构,结合静态和动态场景信息,通过异构图卷积网络提升了预测精度。DiVR采用多模式数据处理,有效捕获人-场景交互,实验显示其在不同条件下具有优越的表现。尽管模型对高质量数据集依赖性强,但未来可借助智能城市和自动驾驶数据增强其适应性。该研究展示了VR技术在复杂任务和低视力条件下的应用潜力。
DiVR:基于多模态Transformer的VR场景人体轨迹预测模型

vivo宣布Vision MR头显2025年下半年发布,支持vivo X200 Ultra空间视频

vivo在4月21日的新品发布会上宣布,将于下半年推出Vision混合现实头显,尚未透露更多信息。同时,vivo X200 Ultra也支持空间视频拍摄,并可通过Vision头显提供沉浸式体验。尽管关于Vision的细节有限,但早前演示的设备前面板集成了多个摄像头,并采用外接电池设计。vivo副总裁胡柏山表示,MR有望成为下一个智能手机级别的产品,公司的MR穿戴设备将基于用户需求提供优质智能体验,目标在2025年9、10月推出。
vivo宣布Vision MR头显2025年下半年发布,支持vivo X200 Ultra空间视频

XR日报:Meta眼动数据选择性上采样技术,Meta提出NVAPE技术革新VR声学建模

Meta推出眼动追踪的XR视觉数据选择性上采样技术,通过动态分配不同质量级别以优化显示性能,可节省50%以上计算资源。阿尔托大学与Meta团队的NVAPE方法实现多频带声学参数预测,提供高效声学渲染解决方案。谷歌展示搭载Gemini AI的AR眼镜原型,实现多模态交互。Meta发布VR游戏设计指南,强调“回忆”和“成长”两大核心。PICO的多人VR恐怖游戏《Alien Infection》登陆商用平台。Infinite Reality收购Touchcast整合AI导师平台Mentorverse。UFC选手使用PSVR 2进行心理训练。Meta Quest Store进行“Reality Bytes”促销,卡普空统计显示《生化危机4:重制版》玩家数持续增长。第三方开发的《侠盗猎车手:圣安地列斯》VR Mod发布。
XR日报:Meta眼动数据选择性上采样技术,Meta提出NVAPE技术革新VR声学建模

Meta XR专利分享眼动追踪视觉数据选择性上采样技术

Meta提出在XR系统中,生成透视可视化可通过选择性上采样视觉数据来提高效率,从而减少硬件要求和处理负载。该系统利用眼动追踪技术,动态分配捕获视觉数据的质量等级,并对用户视场的中心和外围区域进行上采样。通过稀疏填充的mipmap技术,系统可以在不同质量级别之间有效管理视觉数据的渲染,确保即使使用低分辨率捕获设备也能提供高分辨率的呈现效果。此方法可以显著提升XR视觉体验。
Meta XR专利分享眼动追踪视觉数据选择性上采样技术

Meta提出NVAPE技术,革新VR声学建模

新视场声学合成(NVAS)在AR和VR中引起关注,但受限于单通道声学特性推断和对复杂场景的处理能力。芬兰阿尔托大学和Meta团队提出的新任务:新视图声学参数估计(NVAPE),利用有限几何信息和单个随机选择的房间脉冲响应(RIR)作为输入,从而改善声学环境的理解。这种方法避免了对详细材质属性的需求,并展示了在预测声学参数时的有效性。该研究为沉浸式体验的声学效果提供新思路,提升了声音的可理解性和空间定位。
Meta提出NVAPE技术,革新VR声学建模

Meta Quest开发者新手指引最佳实践 Part 2

Meta的增长洞察旨在为开发者提供提升用户粘性、留存率和盈利的策略。博文系列强调新手指引的三个核心支柱:Competence(能力)、Recall(回忆)和Progression(成长)。有效的新手体验需要关注用户的学习和记忆能力,通过简化输入、重复练习、即时反馈和提供提醒来加强用户的记忆。同时,引入成长系统和短期目标可增强玩家的成就感,提升用户回归的动力,以实现更好的保留效果。
Meta Quest开发者新手指引最佳实践 Part 2

恐怖密室VR体验《Alien Infection》登陆PICO商用平台

PICO宣布与合作伙伴vrCAVE推出全新LBE VR密室逃生体验《Alien Infection》,该游戏现已上线PICO 4 Ultra Enterprise。游戏支持2-5名玩家,持续时间约45分钟。故事围绕一宗奇怪事件展开,玩家团队需调查森林附近的异常情况,最终发现外星飞碟和感染威胁,必须协同合作并控制技术以逃脱。游戏已向采用PICO 4 Ultra Enterprise的LBVR运营商开放。
恐怖密室VR体验《Alien Infection》登陆PICO商用平台