Facebook用手机实现全身动捕追踪,准确检测身体姿势,从背景分割人像

据映维网报道,Facebook正在不仅在研发可以修改或取代人脸的AR应用,还在研发可以取代整个身体的AR应用。Facebook AI Camera团队发布了一篇论文,介绍了如何在VR或AR环境中进行全身替换或追踪。为了实现这一目标,Facebook研发了一种新技术,可以准确地检测身体姿势并分割出人像。该技术的模型体积较小,可以在智能手机上实时运行。这一模型基于Mask R-CNN框架,其优化设计和模块化设计都有助于提高计算速度和减小模型大小。Facebook的研究成果将为AR和VR领域中的身体追踪应用带来更高效和轻便的模型。
Facebook用手机实现全身动捕追踪,准确检测身体姿势,从背景分割人像

Oculus研究揭示了新的多焦点显示技术。

Oculus Research,该公司的研发部门,最近发表了一篇论文,深入探讨了他们的眼动跟踪辅助多焦点显示技术,详细介绍了他们所称之为“知觉”实验平台的创建。...

腾讯投资影视游戏娱乐工作室Skydance Media

好莱坞娱乐工作室Skydance Media近日宣布,腾讯向其投资了一笔资金。虽然目前投资的金额未公布,但腾讯此次投资将支持Skydance在中国市场推广和发行电影,并为腾讯提供面向中国消费者的吸引力内容。Skydance Media是由Oracle创始人拉里·埃里森的儿子大卫·埃里森于2010年创办的公司,其电影作品包括《碟中谍5:神秘国度》、《终结者5》、《僵尸世界大战》和《星际迷航2:暗黑无界》等。此外,Skydance Media旗下的游戏子公司Skydance Interactive也是著名的虚拟现实游戏开发商,他们进军游戏领域,并将目光聚焦于虚拟现实。腾讯此次合作投资也将使Skydance Media能够接触到腾讯在亚洲市场和游戏领域的专长与经验,进一步扩大自身在这些市场中的影响力。
腾讯投资影视游戏娱乐工作室Skydance Media

小派8K头显推迟到今年Q2季度发货

小派Pimax在CES大展上展示了最新的“8K”头显原型,但宣布产品推迟发货。这款头显在2017年的Kickstarter众筹中取得了巨大成功,但发货日期从最初的计划1月份推迟至今年Q2季度。小派表示他们需要时间调整产品,并确保达到最高质量,同时会频繁更新信息。他们还计划在三月中旬展示接近量产设备的组件"M1"并与社区合作进行测试和收集反馈。 对于Kickstarter的硬件项目而言,推迟发货窗口是常见现象,因此映维网并不感到意外。现在的问题是,小派是否能够及时解决问题,并在Q2季度成功上市发售。
小派8K头显推迟到今年Q2季度发货

柯达推出8K 360度相机和4K 180度相机

柯达在CES大会上展示了两款虚拟现实相机的创新成果。首先是三镜头8K PixPro 360相机,拥有较高帧频和防水功能,解决了水下拍摄的问题。相机的续航能力预计在1至1.5小时之间,并可以通过外部电池组供电。柯达表示,与其他8K相机相比,他们的产品更小巧,并且定价可能会较低。第二款相机被命名为“the Butterfly”,可以以30FPS的速度拍摄4K内容或180度的3D内容。此外,可以将三台相机组装成完整的360度3D装置。
柯达推出8K 360度相机和4K 180度相机

光场技术厂商Lytro收购VR内容开发商Limiless

剧场式VR体验内容与工具开发商Limiless已经加入Lytro,以开发可以直接在游戏引擎中结合光场技术和实时渲染的工具。Lytro将光场技术定位为VR的主要捕捉格式,并正在开发捕捉真人实景光场和生成全合成光场的工具。他们收购了Limiless的团队,该团队的作品包括叙事性VR内容《Reaping Rewards》,他们的工具可以支持作品直接在VR中实时运行。Limiless团队将帮助开发Lytro的游戏引擎工具集,实现光场融合至实时渲染内容。通过集成Unity和Unreal引擎,Lytro的目标是让开发者轻松利用光场的优势,同时不放弃实时渲染内容的优势。光场能够捕捉高质量的实时体三维视频或实现高质量预渲染CGI视觉效果,但由于预捕获或预渲染的性质,光场不能即时响应输入,不支持实时渲染内容的交互。Lytro希望帮助开发者在单个项目中互换使用光场技术和实时渲染,不需要在质量和交互性之间做出选择。他们展示了在游戏引擎中使用光场的用法,包括修改场景外观、复合文本、编辑场景、组合光源等。Lytro目前只向与公司直接合作的开发商提供工具。
光场技术厂商Lytro收购VR内容开发商Limiless

模拟人眼,ProMetric为AR-VR透镜提供近眼显示质量测试解决方案

照明和显示设备视觉试验与检验服务提供商Radiant Vision Systems发布了一款用于测量增强现实头显和虚拟现实头显视觉质量的AR/VR透镜。这款透镜模拟了人眼的大小、位置和视场,并且在透镜前面设置了一个光圈,使得成像系统的入射光瞳定位在与人眼相同的位置。Radiant Vision Systems表示,现有的光度测量设备无法在不被头显硬件遮挡的情况下捕捉显示器的全角度视角。相比之下,他们的AR/VR透镜可以在头显内复制人眼的孔径特性,并且可以测量120度的大视场,适用于先进的VR设备。通过将AR/VR透镜直接安装到ProMetric成像光度计或色度计上,Radiant Vision Systems为头显内近眼微显示器测量提供了解决方案。另外,Radiant Vision Systems的TrueTest软件提供了AR/VR测试所需的专业测试,可以快速评估所有相关显示特性,包括亮度、色度、对比度、均匀度、mura(不均匀)、像素和线条缺陷等。AR/VR透镜是ProMetric成像光度计或色度计的可选安装附件,可以轻松拆卸并用于其他显示测量应用。
模拟人眼,ProMetric为AR-VR透镜提供近眼显示质量测试解决方案

3D扫描技术Occipital完成1200万美元C轮融资,发展感知引擎

Occipital是一家专注于3D扫描和感知技术的初创公司。他们通过开发高帧率深度摄像头结合机器学习技术,为用户提供更精密的追踪和识别功能。通过完成一轮1200万美元的C轮融资,Occipital计划将其追踪平台扩展到“Perception Engine(感知引擎)”,并与Misty Robotics合作进军机器人领域。他们的产品包括Structure传感器和Canvas软件,可实现对环境和对象的3D扫描和CAD模型的创建,以及为iPhone提供位置追踪功能。除了在AR/VR领域外,Occipital还以其monoSLAM技术追踪设备的能力为产品带来了高质量的内向外追踪。Occipital的发展方向明确,定位更高,与英特尔RealSense等大公司在相同领域展开竞争。
3D扫描技术Occipital完成1200万美元C轮融资,发展感知引擎

利用Vive控制器,微软为视障者设计VR手杖控制器

微软研究院最近发明了一种手杖型控制器,可以为视障人士提供在虚拟现实中导航的能力。这个控制器使用了多种触觉反馈路线来模拟虚拟表面的触感、纹理和声音。比如,当手杖碰触虚拟对象时,可编程制动机制会产生物理阻力;当手杖碰撞物体或触碰、拖动各种表面时,系统会模拟振动的触觉反馈,并提供模拟真实世界手杖声音的3D听觉反馈。微软的测试中,经过少量训练,有8位视障人士成功地在虚拟办公室中导航和穿越马路。微软指出,这个控制器还可以用于视障人士的培训,在虚拟环境中进行安全的培训,然后将新技能应用于现实世界。该研究的详细内容可以在相关论文《Enabling People with Visual Impairments to Navigate Virtual Reality with a Haptic and Auditory Cane Simulation》中找到。
利用Vive控制器,微软为视障者设计VR手杖控制器