研究员为360°图像传输提出减少无线传输通信开销的神经网络框架

澳大利亚新南威尔士大学的研究团队提出了一种名为AM-VQ的框架,用于VR 360度图像的高效传输。目前,由于360度图像数据的海量性质,网络存储和带宽方面面临着挑战。AM-VQ方案利用深度神经网络和向量量化来提取和压缩语义特征,并通过激活图自适应量化语义特征,降低了数据失真和通信开销。为了提高360度图像的重建质量,该团队还使用了生成式对抗网络鉴别器进行对抗训练。数值结果表明,与现有的基于深度学习和传统编解码方案相比,AM-VQ方案具有更好的性能。由于360度图像的复杂性和数据量大,研究人员正在探索更有效的图像压缩技术和传输解决方案。传统压缩方法在处理360度图像时面临挑战,而基于深度学习的压缩方法显示出潜力。然而,在高压缩比下保持重建质量仍然是一个挑战,特别是在模型泛化能力有限或缺乏综合训练数据的情况下。AM-VQ框架通过结合深度神经网络和向量量化来实现高效的360度图像语义通信。
研究员为360°图像传输提出减少无线传输通信开销的神经网络框架

据报道,三星计划在1月举行的Galaxy S25活动上发布智能眼镜。

据韩国联合通讯社报道,三星计划在其年度的Unpacked产品发布会上推出一款XR眼镜。三星承诺将向外界透露更多关于其即将推出的“XR平台”的消息,并与谷歌和高通合作开发该平台。据报道,三星预计将在发布会上展示一款形状类似普通眼镜或太阳镜、重约50克的设备,具备支付功能、手势识别和面部识别。业内人士猜测该产品将于2025年第三季度左右推出。三星还计划在本月发布搭载Android系统的XR软件。虽然报道称该设备为“AR眼镜”,但根据传闻的重量和没有提到内置显示屏,更接近于Ray-Ban Meta智能眼镜。报道还提到,三星此前注册了一系列与下一代XR设备有关的商标。三星尚未透露Unpacked发布会的具体时间和地点,但《Android Police》猜测可能在1月23日在旧金山举行。

斯坦福、英伟达和MIT团队提出显著改善全息图像质量的解决方案

新兴的全息显示技术为下一代虚拟现实和增强现实系统提供了独特的功能。然而,目前的全息近眼显示器只支持一个小的可变空间,导致视场和视窗尺寸之间存在直接权衡。一种新的扩展方法被提出,该方法在图像质量和寿命方面得到了显著改善。该方法将多个相干源与傅里叶平面全息图频谱的内容自适应幅度调制相结合,通过瞳感梯度下降的计算机生成全息算法和大基线目标光场监督,生成时间复用相位和振幅模式。与传统方法相比,该方法在模拟和实验全息显示原型中显示了显著改善的图像质量和寿命。该方法利用动态的可编程调幅机制以内容自适应的方式调制显示图像的频谱,从而实现了扩展的视窗和大视场。研究人员通过实现三维全息显示设计和评估算法,证明了该方法的有效性。然而,该方法还需要进一步努力以使系统小型化,并解决其他限制,例如校准原型显示器的神经网络参数化波传播模型。总的来说,该方法提高了全息显示的传输速率和图像质量,有助于全息显示器成为更实用的技术。
斯坦福、英伟达和MIT团队提出显著改善全息图像质量的解决方案

第九届金陀螺奖 | 优质VR/AR参评项目:君看文化-全新海洋主题VR沉浸展《深海奇遇》

金陀螺奖是由陀螺科技创立的影响力大奖,被誉为泛TMT领域的“OSCAR”,至今吸引近万项目参赛。奖项设有游戏、XR及电竞类,共30+类别,旨在表彰行业内的领航者与创新者。当前,VR陀螺展示由君看文化提供的《深海奇遇》VR沉浸展,结合中国古代文化与现代技术,打造新型文旅体验。现已开放报名参评,欢迎优质企业参与。
第九届金陀螺奖 | 优质VR/AR参评项目:君看文化-全新海洋主题VR沉浸展《深海奇遇》

最新资讯第九届金陀螺奖 | 优质VR/AR参评项目:芯明-芯明空间计算芯片

金陀螺奖由陀螺科技创立,被誉为泛TMT领域的“OSCAR”,吸引了近万家参赛项目。本届奖项设立游戏类、XR类和电竞类三大类别,共30多个奖项,旨在表彰行业领航者。芯明公司参评的空间计算芯片是全球唯一单芯片集成实时3D立体视觉感知、AI和SLAM的系统级芯片,具备强大的计算能力和多传感器融合技术,为XR应用提供技术基础。芯明致力于在全球范围内推动空间智能的普及与应用。
最新资讯第九届金陀螺奖 | 优质VR/AR参评项目:芯明-芯明空间计算芯片

最新资讯第九届金陀螺奖 | 优质VR/AR参评项目:影目科技-INMO AIR3

金陀螺奖由陀螺科技创办,是泛TMT领域的重要奖项,已吸引近万家参赛项目。第九届奖项包括游戏、XR和电竞类,共设30多个奖项,以表彰行业内的创新者。INMO影目科技参评其AR眼镜INMO AIR3,旨在将AR眼镜定义为下一代移动终端。该设备配备先进的IMAR光学显示引擎,使AR视觉体验更自然,并具备高分辨率和强大算力。IMOS 3.0操作系统为用户提供流畅的空间交互体验,兼容多数安卓应用,实现高效办公和沉浸娱乐。INMO AIR3的设计兼顾性能与美观,突破传统体积限制,适合日常使用。
最新资讯第九届金陀螺奖 | 优质VR/AR参评项目:影目科技-INMO AIR3

Steam 11月数据:Quest 3/3S大增,PICO 4增长至新高

据Valve公布的2024年11月份的Steam硬件和软件调查数据显示,VR头显用户占比增加1.73%。在头显方面,Meta的Quest 3在黑五促销季大幅增加2.32%,占据了20.8%的市场份额。需要注意的是,尽管Meta已经在10月中旬发布并发货了全新入门级头显Quest 3S,但在11月的统计数据中尚未出现Quest 3S的身影。另外,Valve Index的市场份额减少了2.28%,是当月跌幅最大的头显。此外,PICO 4的市场份额增幅仅次于Quest 3,增加了0.81%至3.58%。而索尼的PSVR 2的市场份额减少了0.39%,为1.68%。在品牌总份额方面,Meta保持了第一的位置,占据了65.52%的市场份额,其次是Valve(14.45%)、HTC(6.28%)和PICO(4.19%)。
Steam 11月数据:Quest 3/3S大增,PICO 4增长至新高

游戏资讯11月SteamVR数据:Quest 3升至20.08%,涨幅最大

Valve公布了2024年11月Steam用户硬件设备占比情况,其中VR用户占比为1.73%,较上月小幅提升0.18%。Quest 2的使用频率降至34.14%,而Quest 3上涨至20.08%,显示出其在消费市场中的快速增长。其他头显方面,PICO 4和Pico Neo 3的占比也有所上升,分别为3.58%和0.61%。相对而言,Valve Index HMD和Pimax HMD的使用率有所下降。整体来看,Quest 3在市场中占据了日益重要的份额。
游戏资讯11月SteamVR数据:Quest 3升至20.08%,涨幅最大

游戏恒信东方研发,纯手势操作VR动作游戏《Drakheir》即将登陆Quest主商城

由恒信东方XR团队开发的VR动作游戏《Drakheir》将在12月5日正式上线Quest商店。该游戏采用定制的虚幻5引擎,融合欧美魔幻美术风格,属于Roguelite-RPG类型。玩家将扮演一名能操控元素魔法的冒险者,学习超过40种魔法与敌人战斗,揭开魔法世界的秘密。游戏基于Meta Quest的手势识别2.0技术,利用双手实现操作,无需控制器,从而提供流畅的战斗体验。
游戏恒信东方研发,纯手势操作VR动作游戏《Drakheir》即将登陆Quest主商城

创新的虚拟现实歌剧《尘埃中》结合了生成性人工智能提示、数字吟唱和个性分支。

《尘土》是一部名为《从尘土而来》的VR歌剧影片。这部作品注重沉浸式叙事和未来的空间计算。观众在体验时需要进入一个7×7米的空间,并通过心理分析、选择回答问题和进行动作等方式参与其中。音乐在作品中起到核心和情感驱动的作用,创作过程中还涉及人工智能提示和无形分支等元素。作品通过与音乐团队Sojalla合作,将观众的个人化体验与音乐表演相结合。制作团队在环境设计上力求展现真实感和梦幻感,并通过观众的视角和参与感触发情感共鸣。虽然这是一部非常强大而个性化的沉浸式旅程,但由于资源需求和运营成本,作品更适合在博物馆和节日等特定场合展示,而不太适合商业化运营。然而,制作团队计划将来通过VR平台《游龙》等作品将沉浸式体验带给更多的观众。这部分文本讨论了一个名为《尘土》的虚拟现实歌剧的体验。该作品的音乐和沉浸式空间结合在一起,给观众带来了完整的冒险和旅程的感觉。作曲家Michel Vander Ahn提到,这个作品具有坚实的情感核心和出色的构成,还有美妙的空间音效和乐团表演。他指出,空间媒介和沉浸式质量的相互作用对音乐的推动有所帮助,为未来的音乐体验开辟了新的方向。然而,由于通行能力有限,只有少数人有机会亲身体验这部作品。尽管如此,团队正在探索将其转化为其他平台上的分发方式。文章结尾提到,《尘土》展示了沉浸式音乐体验在未来的潜力。 该作品还与一些图像和场景相结合,如但丁的地狱、蘑菇房子、太阳能朋克未来的愿景等,为观众营造出灵感的氛围。然而,由于观众容纳能力有限,只有少数人能够亲自体验这些作品,但希望在未来能够解决这个问题。 文章最后呼吁听众支持该播客,推广播客并考虑成为Patreon会员,以继续支持节目制作。