Insider Insider

Meta、斯坦福大学用生成式AI实现3D空间环境人机交互,为AR/VR打开高水平动态人机交互大门

斯坦福大学和Meta的FAIR团队近日介绍了一种突破性的人工智能系统,名为CHOIS(Controllable Human-Object Interaction Synthesis/可控人-物交互合成)。该系统使用最新的条件扩散模型技术,能够仅根据文本描述,在虚拟人和物之间产生自然的同步运动。研究团队专注于从语言描述和稀疏物体路径点的指导下,合成涉及不同对象的逼真交互。通过条件扩散模型,CHOIS系统能够模拟生成详细的运动序列,实现语言与物理动作的联系。该系统对动画和虚拟现实领域具有重要影响,可以省去制作复杂场景动画所需的时间和精力,并提供更身临其境的交互式体验。研究小组认为这是创建先进人工智能系统、进一步研究从3D场景和语言输入中合成人机交互的重要一步。该研究为未来可能带来更复杂的人工智能系统打开了大门。
Meta、斯坦福大学用生成式AI实现3D空间环境人机交互,为AR/VR打开高水平动态人机交互大门

索尼专利提出气味呈现设备,为PSVR嗅觉体验提供可能性

据映维网报道,索尼近日公布了一项名为“Aroma chemical presentation apparatus”(香气化学呈现设备)的专利申请。该设备旨在为用户提供嗅觉体验,包括封装香气化学材料的封装体支撑单元、物理作用于封体以散发香气化学物质,并通过排气风扇形成气流。此外,香气化学呈现设备还包括托盘单元、机构单元和控制电路单元。机构单元与托盘单元可相互集成形成容器体,并通过铰链连接。控制电路单元通过接收信息处理设备发送的指令控制香气化学呈现设备。香气化学物质通过排气风扇产生的气流被呈现给用户,当停止呈现时,另一个排气风扇产生的气流用于排出残留的香气化学物质。香气化学呈现设备还可以通过代码图像读取器与信息处理设备或类似设备进行通信。这项专利申请于2023年4月提交,并由美国专利商标局公布。
索尼专利提出气味呈现设备,为PSVR嗅觉体验提供可能性

微软AR/VR专利在物理显示屏、3D虚拟屏间的实现鼠标迁移,为XR混合办公提供技术支持

办公是头显的一个重要用例。通过头显系统可以呈现远大于物理显示屏的显示空间。然而,这种用例涉及将数字内容从3D虚拟空间移回物理显示屏,或者从物理显示屏移到3D虚拟空间的情况。微软申请的专利名为“Mouse cursor and content migration between 3d space and physical flat displays”,介绍了一种相关的方法,特别是鼠标提示符和内容从3D空间到物理平面显示器的迁移。该专利描述了将鼠标提示符从显示屏的有界显示区域移出的情况,并在增强现实环境中生成和呈现鼠标提示符的虚拟对象实例。系统可以根据用户输入将交互控制对象移动到有界显示区域之外,并提供不同的显示样式和交互方式。此外,系统还可以根据用户输入选择不同的虚拟对象显示元素,并在不同的表示格式下呈现交互式控件对象。该专利提供了增强用户体验的方法,帮助用户在增强现实场景中与虚拟对象进行交互。
微软AR/VR专利在物理显示屏、3D虚拟屏间的实现鼠标迁移,为XR混合办公提供技术支持

Wi-Fi 7 标规2024年Q1定案,高速率低延迟为无线AR/VR提供支持

Wi-Fi联盟宣布将于2024年一季度末最终定案Wi-Fi 7标准规范。这一全新的标准引入了多项新技术,可以大大提升数据传输速率并降低时延,为沉浸式AR/VR等新兴技术提供更好的支持。据介绍,Wi-Fi 7的速度可高达30Gbps,是Wi-Fi 6速率的三倍,同时引入了CMU-MIMO技术,最多可支持16条数据流。此外,Wi-Fi 7新增支持6GHz频段,并且三个频段能同时工作。Wi-Fi联盟表示,Wi-Fi是无数复杂用例的基础连接技术,依赖于Wi-Fi来提供高数据吞吐量和低延迟,而沉浸式AR/VR、社交游戏和需要实时功能的工业应用等场景都需要高容量的Wi-Fi连接。已有一系列厂商发布了Wi-Fi 7相关解决方案,例如高通发布的FastConnect 7800,可实现高峰值速度和低时延,适用于支持新一代的无线XR应用。
Wi-Fi 7 标规2024年Q1定案,高速率低延迟为无线AR/VR提供支持

三星显示重组“A”业务团队,争进入苹果XR设备主要屏幕供应商

韩媒引述消息人士称,三星旗下的Samsung Display已经重组了负责开发符合苹果要求和标准的显示技术的“A”业务团队,目标是成为苹果XR设备的主要屏幕供应商。目前,苹果Vision Pro的屏幕供应商是索尼,但有传闻称三星和LG有意进入苹果供应链。报道称,重组的重点是瞄准未来的发展,为了团队的增长,必须寻找新的动力,其中一个方向就是XR。此前,韩媒ET News报道,三星已经制定了元宇宙战略,旨在构建一个以三星为中心的XR生态系统,涵盖元宇宙、软件、内容和硬件等方面。对于“A”业务团队的重组,三星的目标之一是成为苹果XR设备的主要屏幕供应商。报道还表示,三星的微型显示器团队将在商业化前一阶段进行研发,并在2022年底启动了名为“Project M”的开发微型显示器的项目,并积极探索硅基OLED和硅基LED等先进显示技术。
三星显示重组“A”业务团队,争进入苹果XR设备主要屏幕供应商

一览Vision Pro带有环境空间声音的3D空间背景

苹果的Vision Pro头显可以切换至全虚拟现实,并允许用户选择一个环境作为空间背景。根据首个beta版本的visionOS,目前有12个环境供用户选择。之前有一位Twitter用户分享了其中一个空间背景的演示视频,但只有34秒且没有声音。现在,该用户发出了一个9分钟的视频,展示了8个空间背景环境,并带有环境空间声音。视频中展示的环境包括约书亚树国家公园、约塞米蒂国家公园、晨光、春天之光、夏日之光、秋日之光、冬日之光和胡德山等。这些环境的特点分别是巨石、岩石山丘、冬日新雪、明亮的色彩和欢快的小鸟、丰富的色彩和海浪声、冰雪蓝色的冬天和山顶上的湖泊等。虽然普通消费者目前无法亲身体验Vision Pro头显,但随着产品上市,苹果将在门店提供相关的演示介绍。
一览Vision Pro带有环境空间声音的3D空间背景

iOS 17.2推出,iPhone 15 Pro系列开始支持空间视频录制

苹果公司宣布,通过iOS 17.2发布后,iPhone 15 Pro和iPhone 15 Pro Max用户将可以使用全新功能开始录制空间视频。这项创新功能旨在捕捉生活中宝贵的时刻,并通过Apple Vision Pro回顾温馨回忆。苹果表示,iPhone 15 Pro和iPhone 15 Pro Max搭载了迄今为止最强大的摄像头系统,可以呈现出卓越的视频质量。用户只需要在设置中启用空间视频,然后使用iPhone 15 Pro和iPhone 15 Pro Max的先进摄像头系统以三维形式记录自己喜爱的时刻。空间视频的拍摄规格为1080p、30帧/秒,采用标准动态范围。苹果还提到,依托先进的计算视频拍摄技术和HEVC压缩,iPhone 15 Pro和iPhone 15 Pro Max可以以小巧的文件大小展现令人叹为观止、极富空间感的回忆。用户可以在照片app的全新“空间”相簿中找到所有空间视频,并通过iCloud在所有设备上同步。而在Apple Vision Pro中,空间视频将变得栩栩如生,用户可以以原始尺寸观看视频并享受沉浸式体验。
iOS 17.2推出,iPhone 15 Pro系列开始支持空间视频录制

微型赛车游戏《微型机器》将于一月份登陆Quest和PC VR平台,观看发布预告片请点击。

即将登陆Quest和SteamVR头显的迷你赛车游戏《微型机器:迷你挑战的疯狂》将带来一波怀旧之情,带玩家重温玩具车与连接赛道的经典游戏体验。该游戏由Wimo Games开发,计划提供多种游戏模式,让玩家在VR和MR中畅快驰骋,前提是要有Quest 2/3/Pro头显。游戏的特点包括赛道建造、任务和车辆改装。玩家可以通过直观的系统操作,切换和放置赛道片段,构建令人难以置信的赛道,甚至创建环环相扣和悬浮在半空中的长赛道。在战役模式中,玩家需要建造并进行比赛,完成不同的任务目标,选择适合的车辆和赛道。玩家还可以解锁和收集车辆、外观和零件,改装车辆以获得更快的速度和更大的特技。此外,游戏还支持混合现实,玩家可以在沙发、桌子和困倦的宠物周围建造赛道,并在关卡模式中生存并攀登每周排行榜。《微型机器:迷你挑战的疯狂》将于2024年1月4日登陆Quest和SteamVR头显,玩家可以在Meta Quest商店和Steam上提前将其添加至愿望清单。

行业活动FBEC2023 | 七鑫易维副总裁路伟成:XR眼球追踪的几大关键落地场景

FBEC2023未来商业生态链接大会将于2023年12月8日在深圳举行,主题为“合力共生•韧者行远”。会议将关注AI、元宇宙、XR等科技前沿领域,并探讨新科技、新商业的未来。七鑫易维副总裁路伟成在会议上分享了关于XR眼球追踪的应用,包括注视点渲染、瞳距调节、表情追踪、身份识别、交互和眼动数据分析。路伟成指出,眼球追踪技术在XR行业中的重要性以及市场发展趋势,强调了其成为XR标配的潜力。
行业活动FBEC2023 | 七鑫易维副总裁路伟成:XR眼球追踪的几大关键落地场景