Nweon

nweon 文章

提升AR/VR性能,Facebook申请『基于机器学习的着色器的GPU』专利

为了降低成本、减少对传统芯片厂商的依赖,科技巨头们一直在大力研发自己的芯片产品。Facebook也在芯片领域积极布局。据报道,2018年,Facebook成立了相关的研发团队,并计划首先将芯片应用于自家的智能音箱Portal,然后再拓展至其他产品。最近,美国专利商标局公布了一项名为“Graphics Processing Chip With Machine-Learning Based Shader”的专利申请,其中提到这项技术可用于虚拟现实和增强现实。专利文件介绍了一种用于渲染计算机图形的显卡,其中包括了控制器、可编程存储器部件和多个处理单元等组件,通过机器学习模型来选择性地执行着色操作,并生成图像数据存储在输出存储器中。Facebook详细描述了这个机器学习模型的工作原理,包括根据视图数据、照明数据、颜色数据和材质属性数据生成输出,并使用输出进行图像生成。Facebook希望通过这种基于机器学习的显卡着色器进一步提升显卡的性能,从而减少功耗和渲染时间。这项专利申请最初是在2019年2月提交的,如今被公开。
提升AR/VR性能,Facebook申请『基于机器学习的着色器的GPU』专利

Facebook申请了一份用于VR数据手套的磁场定位追踪专利

Facebook最近在美国专利商标局提交了一项名为“基于通过具有预定位置的磁场传感器所检测到的磁场来追踪设备部分位置”的专利申请。这项专利描述了一种可穿戴设备,其中包含一个或多个磁场发生器,这些发生器位于手套的指尖位置,通过感测手套中的多个磁场传感器感测到的磁场来确定设备的位置。磁场传感器位于手掌、手背和手腕位置,也可以位于桌面或用户佩戴的头显上。系统利用磁场传感器的已知位置来确定每个追踪位置的空间位置,并通过组合这些位置来生成代表性状态描述符,用于存储点位置映射或实时建模以识别用户的手势。这一技术可以解决虚拟现实和增强现实中的姿态追踪问题,并有望在未来得到商业化应用。需要注意的是,这只是一份专利申请,具体的商业化时间尚不确定。
Facebook申请了一份用于VR数据手套的磁场定位追踪专利

谷歌发布MeidaPipe即时运动追踪技术,将AR对象置于运动表面

谷歌最近发布了基于MeidaPipe的Instant Motion Tracking(即时运动追踪)解决方案。该解决方案使用旋转和平移矩阵,提供了相对尺度的六自由度追踪,可以将虚拟2D/3D内容无缝放置在静态或移动表面上,并允许其与真实世界交互。此技术还为动态AR提供了动力,用户可以通过轻触摄像头取景器来放置虚拟的3D对象和GIF动画。该解决方案的核心思想是将摄像头的平移和旋转解耦,并将其视为独立的优化问题。通过结合平移和旋转数据,可以实现跨设备和跨平台的AR追踪,无需初始化或校准。Instant Motion Tracking解决方案使用MediaPipe管道,包括Sticker Manager模块、Region Tracking模块、Matrices Manager模块和Rendering System模块,每个组件由MediaPipe计算器或子图组成。该解决方案还能够将3D贴图和GIF动画带入增强现实体验中,实现有趣的沉浸式环境。此外,PixelShift AI正在利用Instant Motion Tracking解决方案,通过无缝追踪虚拟角色来支持VTuber使用Web技术创建混合现实体验。
谷歌发布MeidaPipe即时运动追踪技术,将AR对象置于运动表面

48场议题分享!2020 Qualcomm XR生态合作伙伴大会完整议程公布

由高通公司与中国电信联合主办的2020 Qualcomm XR生态合作伙伴大会暨第二届XR创新应用挑战赛颁奖典礼将于9月5日在江西南昌举行。本次大会旨在促进XR行业领域的技术、应用和模式创新,连接XR产业生态链,推动中国XR产业的发展。大会共设有一个主会场和三个分会场,包括开发者技术专场、Qualcomm XR企业项目专场和Qualcomm创投专场。此外,还有丰富的主题演讲、论坛环节和产品展示区,涵盖了AR、VR等领域的技术和应用。同时,大会还将举办第二届Qualcomm XR创新应用挑战赛的颁奖典礼,表彰优秀的XR软件应用作品。预计将有近30家资本机构参与创投专场,为参赛者提供资本合作对接机会。通过这次大会,高通公司与合作伙伴共同推动XR终端和应用的扩展,为消费者创造全新的XR世界。
48场议题分享!2020 Qualcomm XR生态合作伙伴大会完整议程公布

微软新专利提出MicroLED显示方案,实现HoloLens小型化

微软最近申请了一项与计算机图形系统相关的专利,描述了MicroLED显示系统和与头显和智能眼镜相关的颜色管理。专利解释了为何MicroLED显示屏将成为微软智能眼镜的关键。另外,专利文件指出MicroLED显示系统可以通过使用多个单色投影仪来生成红、绿、蓝三种色彩的图像,并将它们组合成一个显示给用户的图像,从而降低头显设备的形状参数。该专利申请最初由微软HoloLens团队在2019年Q1季度提交。此外,文章还提到苹果在2014年收购了MicroLED技术的LuxVue公司,但至今并未将其应用于硬件产品。未来是否会在智能眼镜中应用MicroLED显示器,只有时间能够告诉我们答案。微软的这项发明旨在改进小型化组件来显示图像的方法,并提出了比面向教育和工业的HoloLens头显更能吸引消费者的未来智能眼镜产品。
微软新专利提出MicroLED显示方案,实现HoloLens小型化

传惠普Reverb G2将推高端版,支持眼动追踪、面部动捕

据意大利科技媒体Aggiornamenti Lumia报道,惠普有望推出一款名为Reverb G2 Omnicept Edition的高端头显。该报道援引了一些渲染图,显示这款头显在设计上与普通版本略有不同,眼罩机体下方似乎搭载了一个面容追踪摄像头。Aggiornamenti Lumia称他们掌握了更多详细信息,但没有透露。然而,他们指出惠普最近注册了商标名为Omnicept。如果报道属实,Reverb G2 Omnicept Edition可能包括眼动追踪功能和面容追踪功能。考虑到目前缺乏关于G2 Omnicept的细节,我们无法确定它是否真实存在。但从渲染图来看,我们推测Omnicept的目标客户是企业市场而不是游戏玩家。
传惠普Reverb G2将推高端版,支持眼动追踪、面部动捕

沃尔玛可能泄露了新Quest迭代,售价299美元起

沃尔玛官网的一个产品页面显示了一款神秘的Oculus头显产品,名为Oculus Point Reyes,内存分为64GB和256GB,价格分别为299美元和399美元。这个页面已被删除,但可能表示新一代Oculus Quest的发布和预购即将开始。根据谍照,新一代Quest的价格预计会低于第一代。沃尔玛的页面中还包含了Oculus Go头显的占位符图像,但Facebook早已宣布放弃Oculus Go,专注于提供六自由度的头显设备。这个新产品被命名为"Point Reyes",而根据开发者文档中的信息,社区认为新一代Quest的代号是"Del Mar"。
沃尔玛可能泄露了新Quest迭代,售价299美元起

大朋VR完成新一轮数千万融资

中国VR公司大朋VR(DPVR)宣布与东阳市金融控股集团有限公司(东阳金控)达成战略合作,并完成了一轮总额达数千万元的联合投资。东阳金控是东阳市的对外投资平台,而小咖资本是一家专注于文化产业的投资机构,已成功参与投资了多个大文化行业的头部公司。大朋VR成立于2015年,是一家领先的人工智能虚拟现实产品及技术公司,致力于将VR变为一种生活方式。在过去的一年中,大朋VR推出了两款自主研发的新产品,并荣获多个重要奖项和荣誉。根据IDC的报告,大朋VR在中国市场的占有率超过20%。CEO陈朝阳表示,在5G时代,XR行业发展迅速,公司将继续投入产品研发和技术创新,为用户打造出色的XR产品体验。同时,大朋VR即将推出新品Matrix。
大朋VR完成新一轮数千万融资

Valve Index连续三周跌出Steam畅销榜TOP10

根据每周销售总收入排名的Steam畅销榜TOP10,Valve的VR头显Valve Index常会跻身其中。然而,在连续三周的名单中,Valve Index都未能进入TOP10。相较于售价只有几十美元的游戏,售价高达1000美元的Valve Index需要每周售出约1000套才能稳定进入TOP10(年销量也仅为5万多套)。因此,Valve Index跌出畅销榜TOP10成为关注焦点。

谷歌采访:如何解决挑战,实现可实时传输的动态光场视频

谷歌在SIGGRAPH 2020大会上展示了其“DeepView Immersive Light Field Video”项目,该项目获得了最佳沉浸式体验奖。该项目的目标是创造最具沉浸感和舒适感的虚拟现实体验,通过记录场景的光场来实现。为了将动态的沉浸式光场内容带到现实世界,谷歌团队开发了新的摄像设备、视图插值算法和压缩技术。他们使用了半球形摄像装置搭载46个摄像头来记录场景,然后通过计算机视觉技术实现平滑插值。最大的挑战是将46个摄像头的视频压缩到一个六自由度的沉浸式体验中,并实现无缝切换视角。最终,他们将数据量减少到每秒1千兆位以下,并使用分层网格和纹理图集来进行数据表示和压缩。谷歌表示荣获这个大奖非常荣幸,对他们和整个谷歌家族来说意义重大。他们还计划制作可下载的光场演示内容供用户体验。谷歌希望继续探索和开发最引人入胜的自由视点沉浸式虚拟现实视频内容。
谷歌采访:如何解决挑战,实现可实时传输的动态光场视频