斯坦福大学提出采用RGBD摄像头的高帧率,低延迟AR头显系统

斯坦福大学的研究团队发布了一篇名为《An Easy-to-use Pipeline for an RGBD Camera and an AR Headset》的论文,介绍了他们利用单个RGBD摄像头来支持AR头显的实验。该实验使用了搭载微软Kinect v2摄像头的系统来捕获人物,并通过微软HoloLens头显来显示场景。尽管保真度不如选择多摄像头的其他系统,但该系统具有高帧率、低延迟和可移动性,因为它不需要渲染计算机。系统的硬件端包括配备Kinect v2的笔记本电脑和HoloLens头显,软件端包括将像素从Kinect v2发送到HoloLens以及由HoloLens渲染像素的两个方面。该系统面临的挑战来自于设备的三个特征:Kinect v2产生大量数据、HoloLens需要无线传输以及HoloLens具有较低的计算能力。为了解决这些挑战,团队采用了VP8编解码器对彩色像素进行压缩,使用RVL对深度像素进行压缩,然后通过无线网络将像素发送到HoloLens,并使用渲染技术将像素渲染为漂浮在空间上的四边形。团队希望通过公开系统代码,为AR头显应用程序开发提供帮助和便利。
斯坦福大学提出采用RGBD摄像头的高帧率,低延迟AR头显系统

Facebook谈AR眼镜,硬件功耗和散热问题是最大障碍

根据《映维网》的报道,Facebook的芯片与技术工程负责人沙赫黎亚·拉彼在Arm TechCon 2019大会上表示,构建一款舒适、时尚且价格亲民的眼镜型AR设备需要多个领域的技术进步,包括显示器、图形处理、手势追踪和人体工学设计等。他描绘了AR眼镜的未来应用场景,包括夜视、改善视力、即时翻译标志、提示周围人物信息、创建共享白板、建议健康食物选择和选择性聆听等。拉彼认为,实现这一愿景的最大障碍是减少硬件功耗和处理器散热。他建议芯片开发者更好地适应AR眼镜的预期用例,并考虑芯片的耗能情况。他还指出,将AI作为深度嵌入功能分布在整个系统中,可以节省能耗。拉彼希望未来能实现更优每瓦性能的半导体工艺技术进步和更高性能的AI专用加速器。
Facebook谈AR眼镜,硬件功耗和散热问题是最大障碍

《我的世界》开发者:Quest和Go版本短期内无法实现

根据映维网的报道,微软正在考虑将《我的世界》游戏推出Oculus Quest版。今年5月,《我的世界》的反馈页面中出现了Oculus Quest版的提案,并且已经有5000多人参与投票,使其成为建议投票栏中呼声第三高的项目。微软最近正式将该提案标记为“审议中”,表明他们正在考虑为VR一体机带来这款热门游戏。《我的世界:基岩版》的开发者CornerHard在Reddit上表示,团队已经了解公众对VR一体机支持的渴望,并解释了将这种体验移植到Oculus Go和Oculus Quest的挑战所在。然而,目前团队的工作重点是1.14更新和AR游戏《Minecraft Earth》,因此Go和Quest版本的《我的世界》可能需要等待一段时间。
《我的世界》开发者:Quest和Go版本短期内无法实现

《Asgard’s Wrath》游戏玩法概述和印象

《阿斯嘉德的愤怒》终于发布了。据说这款游戏拥有30多个小时的内容,那么核心游戏玩法究竟是什么样的呢?Cas & Chary将在这里分享他们的内部观察。...

〔视频〕Alex Kipman全面讲解HoloLens 2技术细节

微软HoloLens负责人艾利克斯·基普曼近期在ETH Zurich首次全面详细讲解了HoloLens 2的技术细节。该视频提供了完整的演讲内容,字幕由机器生成,可能存在错误。此外,还提供了关于HoloLens 2的延伸阅读链接,包括微软预测2025年高端AR设备的发展情况、HoloLens 2的体验手记以及HoloLens 2为何采用MEMS而非LCOS技术等内容。

2019年10月09日美国专利局最新AR/VR专利报告

《映维网》整理的AR/VR专利包括Magic Leap的健康诊疗显示平台和光纤扫描显示器、Facebook的分段背光液晶显示和基于全息投影的近眼显示、Microsoft的三维环境导航和头显深度映射、Apple的眼动追踪设备和摄像机姿态确定,Google的对象遮挡启动视觉搜索和紧凑颜色深度成像系统、Sony的本地全局用户界面和遮挡追踪系统、Nvidia的感知注视点渲染和对比度增强滤波器、Intel的盲点渲染优化。这些专利涵盖了医疗保健、光纤扫描、波导、衍射光栅、背光调制、眼动追踪、图像显示、增强现实等多个领域,对XR技术和设备的发展具有重要影响。这些专利可以在英特尔公司的XR技术中找到。第一项专利描述了一种系统和方法,通过提供多个畸变网格来补偿光学透镜产生的色差,并且这些畸变网格可以针对不同的透镜参数进行调整,以让畸变网格能够补偿色差,可以对应于红色通道、绿色通道或蓝色通道。 第二项专利描述了一种用于头显的文本增强技术。这种头显系统包括透视显示设备,可向用户显示增强现实内容,并以初始格式显示。系统还包括加速度计和用于检测触发事件的控制组件,其中触发事件基于头显运动。当检测到触发事件时,头显系统将呈现增强版的增强现实内容。 第三项专利描述了与无线可穿戴设备相关的Overhead Communication技术。示例性的架空无线传输接口设备包括可穿戴设备上方的固定装置。可穿戴设备包括第一天线,并且与第二天线相关联的基站。第二天线与固定装置耦合并且与第一天线进行无线通信,其中第一天线或第二天线中的至少一个属于圆极化或分集极化。
2019年10月09日美国专利局最新AR/VR专利报告

苹果新专利为RGB-D摄像头实现SLAM解决方案

苹果公司的一项专利申请涵盖了利用RGB-D传感器信息来为虚拟现实/混合现实头显应用制作三维模型的技术。该专利描述了一种设备、系统和方法,用于实现RGB-D传感器(如RGB-D摄像头)的实时定位和地图构建。实施示例包括估计RGB-D传感器的轨迹以及显示由RGB-D传感器捕获场景的3D重建的设备、系统和方法。这样的虚拟重建可以应用于虚拟现实、混合现实和增强现实应用中。专利描述了设备在接收到摄像头捕获的真实场景多个帧的情况下,选择关键帧并确定虚拟表示的姿态的方法。该专利还涉及将深度信息与现有关键帧融合的方法。需要注意的是,这只是一份美国专利申请,尚未获得专利权。
苹果新专利为RGB-D摄像头实现SLAM解决方案

与微软合作,8th Wall WebAR将支持微软MR捕捉内容

8th Wall宣布与微软合作,将微软Mixed Reality Capture Studio的内容集成到其基于Web的AR体验平台8th Wall Web中。用户可以通过智能手机或平板电脑网页浏览器浏览逼真的3D内容。微软Mixed Reality Capture Studio的总经理Steve Sullivan表示,他们很高兴与8th Wall合作,将全息图在WebAR解决方案中播放,为实现混合现实体三维视频带来了希望。8th Wall此前已支持开发者将8i捕获的全息图带入基于Web的AR体验中。除此之外,Verizon收购了Jaunt的技术资产,苹果收购了iKinema和其实时动捕技术。微软的HoloLens和Mimesys的全息远程呈现技术展示了体三维视频在AR领域的潜力。
与微软合作,8th Wall WebAR将支持微软MR捕捉内容