Insider Insider

首尔科技大学探索基于惯性传感器的预测性AR/VR眼动追踪方案

眼动追踪技术是追踪眼睛视线的高需求技术,在XR系统中应用广泛。传统的VR眼动追踪技术基于视频,使用双摄像头和对角膜反射图像来检测眼球运动,但需要额外的硬件和存在延迟问题。 为了解决这些问题,韩国首尔科技大学提出了一种基于惯性传感器的眼动追踪方案,无需专用眼动追踪组件。他们通过预测性眼动追踪方法来降低注视点的误差,并抵消VR系统的延迟。研究人员使用机器学习模型解决了三个预测问题,从过去的头部方向预测当前的注视点,从过去的注视点和头部方向预测未来的注视点,以及从过去的头部方向预测未来的注视点。实验结果表明,他们的解决方案在50毫秒到150毫秒的预测时间内,将注视点的误差降低了50%到20%。单阶段方法比两阶段方法更具优势,并且基于机器学习的模型在预测眼动追踪上表现出色。
首尔科技大学探索基于惯性传感器的预测性AR/VR眼动追踪方案

Meta为AR/VR眼动、手部、身体追踪提出稀疏彩色图像传感器解决方案

根据映维网Nweon的报道,Meta(前Facebook现实世界)近日公布了一项稀疏彩色图像传感器的专利申请,该技术可以在单次拍摄中捕获红色、绿色和蓝色图像、白光图像和/或红外图像,并由于高灵敏度全色像素而提供更好的低光成像性能。稀疏彩色图像传感器可以在单次拍摄中捕获稀疏的彩色图像,包括对象或场景的红光、绿光、蓝光、红外光和强度信息。通过使用少量的本地内存和共享缓冲区,稀疏彩色图像传感器可以减小系统的尺寸、重量和成本。然而,由于传统的拜耳RGB颜色传感器的限制,Meta提出了稀疏彩色图像传感器的解决方案,通过在全色像素上添加拜耳彩色图像传感器中使用的红色、绿色和蓝色像素,提高光敏度,并允许在弱光条件下获得更好的图像和视频捕捉效果。该技术可以应用于XR系统,改善用户的视觉体验。
Meta为AR/VR眼动、手部、身体追踪提出稀疏彩色图像传感器解决方案

微软专利分享AR/VR控制器追踪的LED数据同步解决方案

为了追踪用户或控制器的位置,一些头显制造商选择了光学传感器方法,例如使用摄像头检测头显附近的LED标记。在使用LED标记时,需要在LED发射和摄像头曝光之间进行同步计时。然而,蓝牙通常具有较长的数据包延迟和不确定性,不适合LED发射时间控制。另外,头显摄像头模块和蓝牙芯片可能来自不同的时钟源,导致时钟漂移,增加了LED和摄像头定时同步的挑战。不准确的同步会影响图像质量、准确性和控制器追踪,同时也会增加计算资源的使用和功耗。微软提出了一项LED同步方法的专利申请,该方法实现了无需修改蓝牙物理层的无线同步技术,使LED的打开时间比摄像头曝光时间短,从而降低功耗和图像模糊。该技术还包括时钟乘法器和频闪信号等组件,以保持LED和摄像头的同步。通过这种方式,可以更有效地同步控制器和LED,减少计算资源的利用和功耗,并提高头显的使用时间。
微软专利分享AR/VR控制器追踪的LED数据同步解决方案

奢侈品牌瓦伦蒂诺推出「Meta Avatar」服装系列

美国公司Meta与意大利奢侈品牌Valentino合作,在其Avatar Store推出了一系列全新的数字服装。Meta Avatars Store于2022年年底推出时已经提供了多个奢侈品牌的数字服装,包括巴黎世家、普拉达和汤姆·布朗。如今,罗马时装品牌Valentino也加入其中,推出了一系列受其最新现实生活系列启发的数字服装,包括迷你裙、贴身连身裤、西装外套、飞行夹克、T恤、牛仔裤和短裤。这些数字服装的售价统一为5美元,是与Valentino品牌相关的最便宜的商品。其次便宜的是Rosso Valentino Mini口红和Stick With Me闪粉妆前乳两款物理商品,价格为25美元。与Meta Avatar Store上的其他数字服装一样,用户可以在Quest、Instagram、Facebook和Messenger上为其avatar穿戴衣服。Messenger还提供了最新的avatar呼叫功能,可以在视频聊天中使用avatar替代摄像头。在虚拟现实中,用户可以在Meta公司的Horizon Worlds社交应用中展示他们购买的数字物品。用户可以按照以下步骤选择和购买支付或免费的数字服装:1.戴上Meta Quest头显;2.在导航菜单中选择个人资料图片,然后选择“编辑avatar”;3.选择“商店”,可以按品牌和价格筛选;4.选择想购买的物品,点击“保存”或“购买”;5.如果购买物品,输入设备PIN码确认购买;6.选择“保存”。avatar将自动更新为新的服装,用户可以随时进入衣柜查看和更换衣服。

内容开发Vision Pro开发教程:探索沉浸式声音设计

苹果发布了Vision Pro的官方开发教程,重点在于沉浸式声音设计。教程探讨如何利用声音增强visionOS应用和游戏体验,苹果设计师分享了选择和构建声景的方法,以创造丰富的沉浸感。内容包括如何在空间中放置音频提示、调整重复的声音,以及设计令人愉悦的声音时刻,以丰富应用程序的基本交互。
内容开发Vision Pro开发教程:探索沉浸式声音设计

内容开发Vision Pro开发教程:创造出色的空间播放体验

苹果发布了Vision Pro的官方开发教程,重点介绍如何在visionOS应用中支持视频播放。教程中涵盖了适用于视频播放的框架和API,并提供了更新应用程序以播放3D内容的指导。同时,还分享了一些定制播放的技巧,以提升用户的沉浸式观看体验。
内容开发Vision Pro开发教程:创造出色的空间播放体验

最新资讯超表面光子芯片商山河光电发生工商变更,或完成新一轮融资

苏州山河光电科技有限公司于7月13日新增多名股东,注册资本由3亿增至3.3亿。该公司成立于2020年,专注于超表面光学芯片的研发,采用先进的半导体工艺和集成封装技术,制造包括超透镜、微型光谱仪和激光雷达等产品。其团队由国内外知名科研人员和行业专家组成,拥有领先的设计和市场经验。超表面光学技术是一项颠覆传统光学器件的革命性技术,属于下一代光学技术平台。
最新资讯超表面光子芯片商山河光电发生工商变更,或完成新一轮融资

最新资讯AR厂商致敬未知完成千万美元天使轮融资,阿里领投

AR科技公司致敬未知近日完成了1000万美元的天使轮融资,阿里参与领投,泥藕资本和泰亚投资等机构跟投。公司由前锤子科技合伙人吴德周创立,团队成员来自华为、字节跳动等知名企业,专注于AI和AR技术的研发。CEO吴德周表示,AI是AR发展的关键,融资将用于产品研发和运营。致敬未知将在7月底发布可穿戴消费级AR眼镜,致力于提升用户的交互体验,继续推进技术创新和内容生态的扩展。
最新资讯AR厂商致敬未知完成千万美元天使轮融资,阿里领投

游戏资讯VR解谜游戏《The Room VR: A Dark Matter》将于7月27日登陆PS VR2

Fireproof Games宣布其解谜游戏《The Room VR: A Dark Matter》将于7月27日登陆PS VR2,提供更高分辨率图形和触觉反馈。原PS VR版玩家可免费升级至新版本。游戏设定在英国考古研究所,围绕一位古物学家的失踪展开,玩家能够探索神秘地点并与独特装置互动。自2020年发布以来,该游戏以其出色的视觉效果和解谜玩法受到好评。
游戏资讯VR解谜游戏《The Room VR: A Dark Matter》将于7月27日登陆PS VR2