Insider Insider

Nweon

nweon 文章

〔Part 3〕Oculus Medium移动工具的开发日记

Oculus Medium是一款专为Touch设计的沉浸式VR体验。最近,Oculus在Medium中添加了Move Tool功能,该工具允许用户移动和重新设置雕刻作品的一部分。Move Tool操作分为两个阶段:第一阶段是实时预览,用户可以通过细微的手部运动实时操作雕刻。第二阶段是移动操作的处理阶段,需要更长的时间。 Medium使用异步运行的线程来处理移动操作,将雕刻和网格处理与渲染分开。在渲染时,Medium可以保持90Hz的帧率,并通过异步时间扭曲和异步空间扭曲来提供流畅的图像。 Medium还使用音效设计来强化操作的感知。通过合理安排异步延迟,Medium保持了较低的操作响应时间。同时,Medium还在研究如何使用GPU来加速雕刻任务。这个系列的文章总结了关于Move Tool的内容,并提供了关于设计和开发VR应用程序的实用信息。
〔Part 3〕Oculus Medium移动工具的开发日记

盘点2017,这七大软硬件项目在推动AR行业发展

2017年,增强现实(AR)取得了巨大的进步,在软件和硬件方面都有所突破。软件方面,苹果的ARKit和谷歌的ARCore帮助AR逐渐走向主流市场。然而,硬件方面的发展仍处于起步阶段,AR头显大部分面向企业客户和开发者,而普通手机缺乏所需的传感器,无法满足用户的要求。 以下是2017年对AR市场有重要影响的优秀AR软件和硬件项目: 1. AR智能手机:苹果的iPhone X通过ARKit推动了AR软件的发展,并在硬件领域取得了重大进展。谷歌的Pixel 2在性能上也相当强大,并支持ARCore平台。 2. 头戴式AR设备:虽然HoloLens被认为是首选的AR头显,但比起HoloLens,已经开始出货的Meta 2在用户规模上有所增长。 3. AR显示设备:Lampix可以将任意表面变成AR显示屏,能够追踪手势并与对象进行交互。 4. AR开发平台:ARKit和ARCore为开发者和企业创造了一个全新的生态系统。 5. IP消费:联想与迪士尼合作推出的AR头显Mirage成为第一个主流消费者AR头显。 6. 商业应用:零售行业开始流行展示产品的AR应用,如Houzz和Pottery Barn,而宜家的IKEA Place是最优秀的实施案例之一。 7. 社交应用:Snapchat在AR领域是先驱,今年推出了一系列的AR滤镜更新,其中World Lens功能最受用户欢迎。
盘点2017,这七大软硬件项目在推动AR行业发展

从美国看未来:21个你必须知道的美国VR消费市场统计数据

2017年对虚拟现实(VR)行业来说是非常艰难的一年,但也是关于内容的一年。VR市场每天都推出新的游戏和应用,而价格下降和体验优化使得VR头显销量达到了历史新高。根据调查,大约34%的美国用户表示愿意为通过虚拟现实头显玩游戏支付更高的价格。另外,约33%的受访者表示他们已经尝试过虚拟现实头显,而92%的人听说过虚拟现实这个词。在头显的购买意愿方面,大约50%的受访者表示只要价格合理,他们愿意购买虚拟现实头显。在对VR的兴趣方面,约18%的人对虚拟现实不感兴趣,而29%表示非常感兴趣。对VR头显的应用领域,大部分人认为游戏是主要应用领域,其次是电影和电视。在额外的调查中,44%的受访者认为VR头显将对游戏产生革命性的影响,而46%的受访者选择了头疼和晕动症作为有可能出现的负面影响。最后,约21%的人认为如果拥有VR头显,他们会玩更多的游戏。总体上,虚拟现实产业已经迈向繁荣未来的第一步。
从美国看未来:21个你必须知道的美国VR消费市场统计数据

只需图像传感器+漫射板,科学家研发出低成本光场相机

研究人员开发了一种新型的无透镜相机,可以在没有显微镜的情况下检查活小鼠微神经元的活动。这种相机利用光场相机技术,通过捕捉光线碰撞图像传感器中的像素数量和碰撞像素的角度来生成3D影像。相机结构紧凑、价格低廉,但用于重建高分辨率三维图像的软件相对复杂。研究团队还开发了复杂的算法和不规则凸块的塑料表面,改进了光场相机的性能。他们计划将该相机用于开发可植入的、生物相容的神经接口,帮助视听障碍患者。通过观察小白鼠大脑中神经元的传导,团队希望更深入地了解感官知觉,并可能用于治疗老年痴呆症和精神障碍等疾病。这种技术能够捕捉大量神经元的活动,为研究大脑工作原理提供了全面支持。
只需图像传感器+漫射板,科学家研发出低成本光场相机

简述增强现实的工作原理、技术需求以及解决方案

增强现实(AR)通过将数字信息叠加在周围环境中,将现实世界与数字世界融为一体,可以是图像、视频或3D模型等任何数据。与虚拟现实相比,AR用户仍然可以感受到由计算力视觉增强的现实世界。AR的主要目标是增强用户周围的现实,实现这一目标的解决方案有多种类型,其中包括即时定位与地图构建(SLAM)、基于标记的AR、基于地理位置的AR和基于投影的AR等。现代设备如智能手机、平板电脑和专用设备都可以支持AR。AR对硬件的要求包括传感器和摄像头用于采集用户行为和周围环境的信息、处理器用于处理和解读信息以及显示器用于呈现AR内容。移动设备是广阔的AR潜在用户群,并且开发移动AR应用的成本较低。特殊的增强现实设备包括平视显示器、增强现实眼镜、增强现实隐形眼镜和虚拟视网膜显示器。虽然增强现实技术已经存在很久,但移动AR市场是一个不容忽视的市场,对于AR开发者来说有很大的潜力。尽管AR技术会不断发展和变化,但AR肯定会在未来的日常生活中发挥重要作用。
简述增强现实的工作原理、技术需求以及解决方案

〔Part 2〕Oculus Medium移动工具的开发日记

Oculus Medium是一款为Touch设计的沉浸式VR体验,可以在VR环境中进行雕刻、建模、绘制和创建有形物体。Oculus最近添加了Move Tool,允许用户抓取、移动和重新设置雕刻作品的一部分。在Medium中,雕刻操作支持指向距离字段(SDF),而渲染器通常使用通过Transvoxel算法生成的三角网格。通过将三角网格转换为指向距离字段呈现,可以在Medium中选择使用SDF或网格呈现进行雕刻操作。将三角网格转换为SDF的方法包括光栅化网格、生成内部区域的span、在边界框中生成未指向距离。完成这些步骤后,就可以得到所需的指向距离字段。除了Move Tool之外,使用两种互补的曲面呈现还可以帮助其他雕刻操作,例如改变分辨率、Copy To Clay、细节层次等。Medium正在继续研究新的和有趣的方式来加速现有的操作,并为雕刻操作带来新的方法。
〔Part 2〕Oculus Medium移动工具的开发日记

3Glasses为蓝珀S1消费者版提供“微软版”升级服务

3Glasses于2016年8月推出了蓝珀S1消费版头显,一年后又推出了改进的蓝珀S1微软版。蓝珀S1微软版是3Glasses与微软合作的首款支持Windows MR平台的产品,在硬件和用户体验上进行了改善。蓝珀S1微软版通过最新版Windows 10的底层优化,支持从底层驱动设备,无需手动安装任何驱动或软件。用户可以通过升级到蓝珀S1微软版来体验微软Windows Mixed Reality系统,玩微软商城的VR/MR应用以及兼容Windows Mixed Reality的Steam VR应用。蓝珀S1消费版的老用户可以选择两种升级方式:蓝珀S1消费版单机版升级方式和蓝珀S1消费版套装升级方式。前者需支付1088元,后者需支付128元,以获得最新版的硬件和软件产品。用户需在2018年1月31日前向3Glasses官方提交申请进行升级。更详细的升级换新信息可在3Glasses发布的指导文档中阅读。
3Glasses为蓝珀S1消费者版提供“微软版”升级服务

人机交互技术公司uSens 2018CES将展出多场景手势及SLAM交互方案

人机交互技术商uSens将在CES 2018展示多场景手势及SLAM交互方案,基于核心计算机视觉及人工智能算法。过去两年的黑科技Demo已成为落地案例,应用于AR、VR、手机、车载等领域。在今年的CES上,来自中国的8款手势交互AR/VR头显将首次公开亮相,其中包括5款整合了uSens手势技术的未发布新品。此外,uSens将展示搭载展讯9853芯片的手机AR方案,这是一种独立研发的基于单目RGB摄像头的方案,不同于ARKit和ARCore只支持部分高端机型,该方案适用于中低端手机,并且将为开发者提供一个亿级用户量的新平台。今年,uSens的手势技术将基于一套算法,不再受限于独立硬件设备,进行跨平台多系统的适配。uSens展位位于LVCC South Hall 1的21723号展区,并欢迎前往体验及洽谈。
人机交互技术公司uSens 2018CES将展出多场景手势及SLAM交互方案

开发者用iPhoneX原深感摄像头实现“AR无脸”特效

一名日本开发者正在研发一款可以令图片和视频中的头部消失的应用程序。开发者通过在Twitter上发布短视频展示了该应用的效果,他的面部几乎完全消失,但效果尚不完美,头发和两侧仍可见,眼睛和嘴巴也有一些“缝隙”。该应用可以完美映射出背景,并且能够根据头部移动进行背景调整。除了创造恐怖诡异的效果外,这款应用还可以用于编辑不喜欢的电影演员或政治家的面孔。开发者并未公布更多关于该应用的功能,但希望它可以帮助“除去”用户不喜欢的面孔。然而,谁能使用这款应用是一个重要问题。开发者表示他使用的是iPhone X,因为只有iPhone X的原深感摄像头可以实现“面孔消失”,所以这一功能可能只有iPhone X用户可以使用。不过,对于增强现实来说,安卓手机也在迎头赶上,谷歌最近为Pixel 2带来了AR贴纸功能,或许很快就可以在Google Play中看到类似的应用。
开发者用iPhoneX原深感摄像头实现“AR无脸”特效

〔Part 1〕Oculus Medium移动工具的开发日记

Oculus Medium是一款专为虚拟现实设备Oculus Touch设计的沉浸式VR体验软件。用户可以在虚拟现实环境中进行雕刻、建模、绘制和创建有形对象。最近,Oculus在Medium中添加了一个名为“Move Tool”的工具,允许用户抓取、移动和重新设置雕刻作品的一部分。Move Tool是Medium“Summer of Move”更新的一个重要功能,也是根据用户反馈意见进行的改进之一。 Move Tool是一个强大的工具,因为它支持用户同时转换和旋转3D对象,这在以往的非虚拟现实应用中需要通过鼠标和键盘进行单独操作。Oculus经历了三个版本的Move Tool原型开发,其中前两个版本因细节损失和性能问题而被放弃。最终的第三个版本使用了三角网格转换为有向距离字段(signed distance field, SDF)的技术,从而实现了更好的细节保留和性能表现。 未来,作者将详细介绍如何将三角网格转换为SDF、在其他工具中应用这种方法,并探讨如何在保持虚拟现实帧率的同时进一步改进。Medium的Move Tool在社区中受到了积极的反馈和评价。
〔Part 1〕Oculus Medium移动工具的开发日记