Insider Insider

Nweon

nweon 文章

Meta研究员探索用posed RGB video进行对象检测、关联和映射

研究人员在名为《ODAM: Object Detection Association and Mapping using Posed RGB Video》的论文中探索了一种利用姿态RGB视频进行对象检测、关联和映射的方法。他们关注对象语义重建和对象映射之间的空间,并使用3D bounding volume表示对象。然而,使用仅有RGB视频定位对象并估计其范围的任务存在挑战,包括深度比例模糊性和多视图约束的缺乏。因此,研究人员提出了ODAM框架,结合了深度学习前端和多视图优化后端,旨在解决来自posed RGB video的3D对象映射问题。ODAM的关键在于基于超二次曲面的多视图优化和attention-based的图形神经网络。研究人员使用ScanNet和Scan2CAD评估了ODAM的性能,结果显示ODAM是目前在复杂室内场景中性能最好的纯RGB-only系统。他们还指出了常用的3D bounding volume表示的局限性,并提出了一种改进的超二次曲面优化方法。总体来说,ODAM在在线3D对象映射领域做出了三方面的贡献。
Meta研究员探索用posed RGB video进行对象检测、关联和映射

索尼展示单眼4K Micro-OLED显示VR头显原型

索尼在其科技日活动中展示了一款搭载4K Micro-OLED显示屏的VR头显原型。该原型与PSVR 2非常不同,不过索尼表示,该显示器预计将用于娱乐领域。该原型通过数据线连接到PC,并配备两个类似潜望镜的扶手。目前,该原型似乎只支持旋转追踪。这款4K Micro-OLED显示器的分辨率比初代PSVR高得多,并且更紧凑。尽管这款显示器较小,但为了获得沉浸感的视场,需要更先进的光学元件。尚不清楚这款显示器是否会在PSVR 2中使用。索尼尚未发布PSVR 2,也不清楚它是否会继续选择使用OLED显示器或转向LCD。此外,索尼预计这款4K Micro-OLED显示器将用于工业应用和娱乐领域。如果PSVR 2不使用该显示器,可能会在其他非VR设备中看到它的应用。
索尼展示单眼4K Micro-OLED显示VR头显原型

Meta正式开放Quest Voice SDK和空间锚定Spatial Anchors

Meta在Connect 2021大会期间发布了一个名为Presence Platform的新产品,其中包括透视功能、空间定位和场景理解,旨在构建更逼真的混合现实、交互和语音体验。现在,Presence Platform中的Spatial Anchors(实验性)和Voice SDK已经向社区开放。 Spatial Anchors是一个参考框架,可以在物理空间中放置虚拟内容,并实现跨会话持久化。通过Spatial Anchors,开发者可以在特定的六自由度姿态下创建空间锚定,并在设备上保留和检索空间锚列表。目前,Spatial Anchors可以通过OpenXR和Unity开发者在v35 SDK版本中使用。 Voice SDK是一个自然语言功能集合,可以用于创建基于语音的导航体验和语音驱动游戏。开发者可以利用Voice SDK创建语音导航、搜索以及启用语音常见问题解答等功能。Voice SDK已经发布了正式版本,并可以包含在v35 SDK中使用。 整体而言,Meta希望通过Presence Platform、Spatial Anchors和Voice SDK等工具来提供更加身临其境的虚拟体验和交互方式。
Meta正式开放Quest Voice SDK和空间锚定Spatial Anchors

传三星与微软合作,基于HoloLens研发新AR头显,预计2024年亮相

据报道,三星决定与微软合作,启动了一个基于HoloLens的AR项目。消息人士指出,该项目于今年夏天启动,将持续两年时间。在与微软合作之前,三星已于今年3月成立了相关项目的工作组。据了解,该项目涉及三星的多个业务子公司,包括三星显示、三星电机和三星SDI等,他们的高级副总裁都参与了项目会议。这个项目将持续到2023年,预计于2024年推出商业产品。由于涉及到三星显示器、三星电子部件和三星SDI等子公司,消息人士认为三星可能与微软在硬件方面进行合作,共同研发一款全新的AR头显。此外,值得一提的是,三星还参投了美国AR波导厂商DigiLens的融资轮次。
传三星与微软合作,基于HoloLens研发新AR头显,预计2024年亮相

引领主流VR价格下探至千元区,爱奇艺奇遇VR的“术”与“道”

爱奇艺智能科技正式更名为“梦想绽放科技有限公司”,并发布了更名后的首款“国民级”VR一体机奇遇Dream VR。奇遇Dream VR配备了骁龙XR2芯片、双手6DoF手柄、8+128G大存储配置,但价格仅为1999元,远低于同类产品市场定价。在过去五年中,VR行业经历了从泡沫到低谷再到复苏的过程。而在这个过程中,VR一体机在硬件、内容、体验等方面得到了长足发展。此外,奇遇Dream VR坚持C端市场,追求优质的产品体验和价格,并始终坚持自建生态。奇遇Dream VR通过向内借势和明星效应,不断破圈,拓宽用户群体。此次发布的奇遇Dream VR以超高性价比引起了关注,是中国VR市场向大众普及迈出的重要一步。爱奇艺奇遇在完善视频、游戏领域布局后,有能力给中国VR市场带来新的发展节奏。
引领主流VR价格下探至千元区,爱奇艺奇遇VR的“术”与“道”

累计预约近3万人,国民级VR爆品爱奇艺奇遇Dream明日开售

高通骁龙XR2是一款被称为“地表最强”的VR一体机芯片。最近,爱奇艺奇遇推出了搭载XR2芯片的奇遇Dream,价格直接降至1999元。奇遇Dream拥有高配置,包括8GB+128GB内存,能提供丝滑流畅的运行体验。在交互方面,奇遇Dream采用了完全自研的“奇遇追光”计算机视觉6DoF交互系统,可以实现头部和手部双6DoF空间体感定位。奇遇Dream还拥有丰富的精品VR游戏内容,已与百余家知名游戏开发商合作,预计2022年平台精品游戏总数将达100款左右。在影音方面,奇遇Dream支持2000吋巨型屏幕、HDR高动态光照渲染、杜比全景声和AI画质增强技术,提供高品质的观影体验。此外,爱奇艺为奇遇VR提供了最新最全的影视内容。奇遇Dream正在天猫和京东平台火爆预约,开售日为12月8日,推出了多项购机福利,降低了奇遇Dream产品的体验门槛。
累计预约近3万人,国民级VR爆品爱奇艺奇遇Dream明日开售

Meta下一代Quest VR头显Cambria或支持变焦显示

Meta在Connect 2021大会上展示的视频揭示了Meta的下一代VR头显Cambria可能支持变焦显示。该发现由AR硬件/软件企业Rave首席科学家卡尔·古塔格挖掘并分享。Cambria采用了类似Kopin的Pancake光学元件和类似DeepOptics的液体透镜技术。Pancake光学元件通过折叠路径以节省空间,并可同时用作透镜和反射镜。而液体透镜则通过施加电压来实现可变焦距。Meta的专利申请中还讨论了多层液体透镜的使用。相比于固定焦距,可变焦距的设计旨在解决视觉辐辏调节冲突。然而,要实现更好的效果,需要更复杂的方法,包括聚焦平面、光场、聚焦表面或真正的全息图。尽管存在一些专利申请的证据,目前尚未有确凿的消息确认Cambria是否会提供不同的焦距功能。
Meta下一代Quest VR头显Cambria或支持变焦显示

Meta研究用基于数据驱动的稀疏皮肤刺激传达丰富AR/VR社交接触信息

研究人员在《Data-driven sparse skin stimulation can convey social touch information to humans》一文中指出,社交触觉是人类社交交流的一部分,但现有的社交触觉设备大多专注于复制单一形式的触觉,如握手和拥抱。为了解决这一问题,研究团队开发了一种基于数据驱动的稀疏皮肤刺激方法,可以传达丰富的社交触觉信息。他们利用记录的人类社交触摸数据创建了一个新的社交触摸数据集,并开发了一种算法将触摸数据映射为稀疏表示,以在触觉设备上呈现触摸信号。研究团队的实验结果显示,被试能够准确地识别数据来源的社交触摸场景,这表明社交触摸信号可以通过稀疏的皮肤刺激来表现。研究人员还发现,恋爱关系中的个体比成对的陌生人更能准确地辨别情感,这可能是因为伴侣发出的信号更具准确性。该研究为今后在触觉渲染方面提供了新的思路和算法。
Meta研究用基于数据驱动的稀疏皮肤刺激传达丰富AR/VR社交接触信息

30天无忧试用!爱奇艺奇遇Dream VR火热预约中

爱奇艺VR新品奇遇Dream是一款VR一体机,采用高配置并以低价1999元的定价在市场上引起了关注。产品配备了高通骁龙XR2芯片、8GB+128GB的大内存,可以流畅运行高品质VR游戏。奇遇Dream还采用了与奇遇3相同的自研“追光”计算机视觉6DoF VR交互方案,实现了头部和手部双6Dof空间体感定位。在游戏引入方面,奇遇VR平台提供了多样的游戏,包括男性玩家喜欢的硬核热门大作、适合女性玩家的快乐燃脂类音乐和运动游戏,以及寓教于乐、休闲益智类游戏,能满足全家的需求。在影视方面,奇遇Dream支持巨型屏幕体验,展现细腻色彩,提供高达17Mbps码流的4K 3D电影和8K全景视频。此外,奇遇Dream还提供了多重福利,包括0元无忧试用、视频发帖享半价、爱奇艺会员0元购、热门游戏免费送以及首发礼和晒单礼。奇遇Dream以其性价比和福利吸引着用户,推动VR的普及。
30天无忧试用!爱奇艺奇遇Dream VR火热预约中

Meta为AR/VR光学元件工艺提出利用具有垂直Y轴的金刚石车削机的多轴运动

模制塑料光学元件,特别是变形和自由形式元件,几乎完全依赖于模具和母版的单点金刚石车削。金刚石车削是一个确定性过程,可以将机械和光学特性集成到相同的加工操作中,并确保与光学表面对齐。然而,当表面在旋转方向变得陡峭时,传统的金刚石车削工艺受到限制。文章介绍了一种利用具有垂直Y轴的金刚石车削机的多轴运动,并通过传统金刚石车削工具进行车削陡峭方位角斜坡的方法。通过添加Y轴运动,可以实现绕其轴旋转刀具的效果,从而获得操纵刀具间隙的额外自由度。这种方法扩大了可用表面坡度范围。实验结果显示,该技术可以在大范围的前角和倾斜角上产生良好的表面光洁度,表明它可以应用于广泛的用例。
Meta为AR/VR光学元件工艺提出利用具有垂直Y轴的金刚石车削机的多轴运动