Insider Insider

只需图像传感器+漫射板,科学家研发出低成本光场相机

研究人员开发了一种新型的无透镜相机,可以在没有显微镜的情况下检查活小鼠微神经元的活动。这种相机利用光场相机技术,通过捕捉光线碰撞图像传感器中的像素数量和碰撞像素的角度来生成3D影像。相机结构紧凑、价格低廉,但用于重建高分辨率三维图像的软件相对复杂。研究团队还开发了复杂的算法和不规则凸块的塑料表面,改进了光场相机的性能。他们计划将该相机用于开发可植入的、生物相容的神经接口,帮助视听障碍患者。通过观察小白鼠大脑中神经元的传导,团队希望更深入地了解感官知觉,并可能用于治疗老年痴呆症和精神障碍等疾病。这种技术能够捕捉大量神经元的活动,为研究大脑工作原理提供了全面支持。
只需图像传感器+漫射板,科学家研发出低成本光场相机

简述增强现实的工作原理、技术需求以及解决方案

增强现实(AR)通过将数字信息叠加在周围环境中,将现实世界与数字世界融为一体,可以是图像、视频或3D模型等任何数据。与虚拟现实相比,AR用户仍然可以感受到由计算力视觉增强的现实世界。AR的主要目标是增强用户周围的现实,实现这一目标的解决方案有多种类型,其中包括即时定位与地图构建(SLAM)、基于标记的AR、基于地理位置的AR和基于投影的AR等。现代设备如智能手机、平板电脑和专用设备都可以支持AR。AR对硬件的要求包括传感器和摄像头用于采集用户行为和周围环境的信息、处理器用于处理和解读信息以及显示器用于呈现AR内容。移动设备是广阔的AR潜在用户群,并且开发移动AR应用的成本较低。特殊的增强现实设备包括平视显示器、增强现实眼镜、增强现实隐形眼镜和虚拟视网膜显示器。虽然增强现实技术已经存在很久,但移动AR市场是一个不容忽视的市场,对于AR开发者来说有很大的潜力。尽管AR技术会不断发展和变化,但AR肯定会在未来的日常生活中发挥重要作用。
简述增强现实的工作原理、技术需求以及解决方案

〔Part 2〕Oculus Medium移动工具的开发日记

Oculus Medium是一款为Touch设计的沉浸式VR体验,可以在VR环境中进行雕刻、建模、绘制和创建有形物体。Oculus最近添加了Move Tool,允许用户抓取、移动和重新设置雕刻作品的一部分。在Medium中,雕刻操作支持指向距离字段(SDF),而渲染器通常使用通过Transvoxel算法生成的三角网格。通过将三角网格转换为指向距离字段呈现,可以在Medium中选择使用SDF或网格呈现进行雕刻操作。将三角网格转换为SDF的方法包括光栅化网格、生成内部区域的span、在边界框中生成未指向距离。完成这些步骤后,就可以得到所需的指向距离字段。除了Move Tool之外,使用两种互补的曲面呈现还可以帮助其他雕刻操作,例如改变分辨率、Copy To Clay、细节层次等。Medium正在继续研究新的和有趣的方式来加速现有的操作,并为雕刻操作带来新的方法。
〔Part 2〕Oculus Medium移动工具的开发日记

3Glasses为蓝珀S1消费者版提供“微软版”升级服务

3Glasses于2016年8月推出了蓝珀S1消费版头显,一年后又推出了改进的蓝珀S1微软版。蓝珀S1微软版是3Glasses与微软合作的首款支持Windows MR平台的产品,在硬件和用户体验上进行了改善。蓝珀S1微软版通过最新版Windows 10的底层优化,支持从底层驱动设备,无需手动安装任何驱动或软件。用户可以通过升级到蓝珀S1微软版来体验微软Windows Mixed Reality系统,玩微软商城的VR/MR应用以及兼容Windows Mixed Reality的Steam VR应用。蓝珀S1消费版的老用户可以选择两种升级方式:蓝珀S1消费版单机版升级方式和蓝珀S1消费版套装升级方式。前者需支付1088元,后者需支付128元,以获得最新版的硬件和软件产品。用户需在2018年1月31日前向3Glasses官方提交申请进行升级。更详细的升级换新信息可在3Glasses发布的指导文档中阅读。
3Glasses为蓝珀S1消费者版提供“微软版”升级服务

人机交互技术公司uSens 2018CES将展出多场景手势及SLAM交互方案

人机交互技术商uSens将在CES 2018展示多场景手势及SLAM交互方案,基于核心计算机视觉及人工智能算法。过去两年的黑科技Demo已成为落地案例,应用于AR、VR、手机、车载等领域。在今年的CES上,来自中国的8款手势交互AR/VR头显将首次公开亮相,其中包括5款整合了uSens手势技术的未发布新品。此外,uSens将展示搭载展讯9853芯片的手机AR方案,这是一种独立研发的基于单目RGB摄像头的方案,不同于ARKit和ARCore只支持部分高端机型,该方案适用于中低端手机,并且将为开发者提供一个亿级用户量的新平台。今年,uSens的手势技术将基于一套算法,不再受限于独立硬件设备,进行跨平台多系统的适配。uSens展位位于LVCC South Hall 1的21723号展区,并欢迎前往体验及洽谈。
人机交互技术公司uSens 2018CES将展出多场景手势及SLAM交互方案

开发者用iPhoneX原深感摄像头实现“AR无脸”特效

一名日本开发者正在研发一款可以令图片和视频中的头部消失的应用程序。开发者通过在Twitter上发布短视频展示了该应用的效果,他的面部几乎完全消失,但效果尚不完美,头发和两侧仍可见,眼睛和嘴巴也有一些“缝隙”。该应用可以完美映射出背景,并且能够根据头部移动进行背景调整。除了创造恐怖诡异的效果外,这款应用还可以用于编辑不喜欢的电影演员或政治家的面孔。开发者并未公布更多关于该应用的功能,但希望它可以帮助“除去”用户不喜欢的面孔。然而,谁能使用这款应用是一个重要问题。开发者表示他使用的是iPhone X,因为只有iPhone X的原深感摄像头可以实现“面孔消失”,所以这一功能可能只有iPhone X用户可以使用。不过,对于增强现实来说,安卓手机也在迎头赶上,谷歌最近为Pixel 2带来了AR贴纸功能,或许很快就可以在Google Play中看到类似的应用。
开发者用iPhoneX原深感摄像头实现“AR无脸”特效

〔Part 1〕Oculus Medium移动工具的开发日记

Oculus Medium是一款专为虚拟现实设备Oculus Touch设计的沉浸式VR体验软件。用户可以在虚拟现实环境中进行雕刻、建模、绘制和创建有形对象。最近,Oculus在Medium中添加了一个名为“Move Tool”的工具,允许用户抓取、移动和重新设置雕刻作品的一部分。Move Tool是Medium“Summer of Move”更新的一个重要功能,也是根据用户反馈意见进行的改进之一。 Move Tool是一个强大的工具,因为它支持用户同时转换和旋转3D对象,这在以往的非虚拟现实应用中需要通过鼠标和键盘进行单独操作。Oculus经历了三个版本的Move Tool原型开发,其中前两个版本因细节损失和性能问题而被放弃。最终的第三个版本使用了三角网格转换为有向距离字段(signed distance field, SDF)的技术,从而实现了更好的细节保留和性能表现。 未来,作者将详细介绍如何将三角网格转换为SDF、在其他工具中应用这种方法,并探讨如何在保持虚拟现实帧率的同时进一步改进。Medium的Move Tool在社区中受到了积极的反馈和评价。
〔Part 1〕Oculus Medium移动工具的开发日记