Insider Insider

Nweon

nweon 文章

人机交互技术公司uSens 2018CES将展出多场景手势及SLAM交互方案

人机交互技术商uSens将在CES 2018展示多场景手势及SLAM交互方案,基于核心计算机视觉及人工智能算法。过去两年的黑科技Demo已成为落地案例,应用于AR、VR、手机、车载等领域。在今年的CES上,来自中国的8款手势交互AR/VR头显将首次公开亮相,其中包括5款整合了uSens手势技术的未发布新品。此外,uSens将展示搭载展讯9853芯片的手机AR方案,这是一种独立研发的基于单目RGB摄像头的方案,不同于ARKit和ARCore只支持部分高端机型,该方案适用于中低端手机,并且将为开发者提供一个亿级用户量的新平台。今年,uSens的手势技术将基于一套算法,不再受限于独立硬件设备,进行跨平台多系统的适配。uSens展位位于LVCC South Hall 1的21723号展区,并欢迎前往体验及洽谈。
人机交互技术公司uSens 2018CES将展出多场景手势及SLAM交互方案

开发者用iPhoneX原深感摄像头实现“AR无脸”特效

一名日本开发者正在研发一款可以令图片和视频中的头部消失的应用程序。开发者通过在Twitter上发布短视频展示了该应用的效果,他的面部几乎完全消失,但效果尚不完美,头发和两侧仍可见,眼睛和嘴巴也有一些“缝隙”。该应用可以完美映射出背景,并且能够根据头部移动进行背景调整。除了创造恐怖诡异的效果外,这款应用还可以用于编辑不喜欢的电影演员或政治家的面孔。开发者并未公布更多关于该应用的功能,但希望它可以帮助“除去”用户不喜欢的面孔。然而,谁能使用这款应用是一个重要问题。开发者表示他使用的是iPhone X,因为只有iPhone X的原深感摄像头可以实现“面孔消失”,所以这一功能可能只有iPhone X用户可以使用。不过,对于增强现实来说,安卓手机也在迎头赶上,谷歌最近为Pixel 2带来了AR贴纸功能,或许很快就可以在Google Play中看到类似的应用。
开发者用iPhoneX原深感摄像头实现“AR无脸”特效

〔Part 1〕Oculus Medium移动工具的开发日记

Oculus Medium是一款专为虚拟现实设备Oculus Touch设计的沉浸式VR体验软件。用户可以在虚拟现实环境中进行雕刻、建模、绘制和创建有形对象。最近,Oculus在Medium中添加了一个名为“Move Tool”的工具,允许用户抓取、移动和重新设置雕刻作品的一部分。Move Tool是Medium“Summer of Move”更新的一个重要功能,也是根据用户反馈意见进行的改进之一。 Move Tool是一个强大的工具,因为它支持用户同时转换和旋转3D对象,这在以往的非虚拟现实应用中需要通过鼠标和键盘进行单独操作。Oculus经历了三个版本的Move Tool原型开发,其中前两个版本因细节损失和性能问题而被放弃。最终的第三个版本使用了三角网格转换为有向距离字段(signed distance field, SDF)的技术,从而实现了更好的细节保留和性能表现。 未来,作者将详细介绍如何将三角网格转换为SDF、在其他工具中应用这种方法,并探讨如何在保持虚拟现实帧率的同时进一步改进。Medium的Move Tool在社区中受到了积极的反馈和评价。
〔Part 1〕Oculus Medium移动工具的开发日记

显卡够强?6步开启超级采样,大幅提升HTC Vive视觉效果

HTC Vive是目前市面上最清晰的消费者VR系统之一,支持2160×1200分辨率。然而,如果使用高性能显卡并进行超级采样,可以大大提升头显显示器的分辨率,提供更清晰的视图。以往需要手动编辑第三方应用的Steam VR目录才能实现超级采样,但后续的SteamVR更新添加了调整采样的功能。然而,增加分辨率可能会导致头显出现不常见的新图形问题,如系统不稳定、帧速率下降和屏幕伪影等。即使使用英伟达的最新GTX 1080显卡,建议不要将采样提高至2.5倍以上。
显卡够强?6步开启超级采样,大幅提升HTC Vive视觉效果

印度VR家居装饰创企Foyr完成380万美元A轮融资

以虚拟现实为基础的家居装饰初创公司Foyr已经完成了380万美元的A轮融资,由房地产咨询公司JLL以及其他投资者领投。利用这笔资金,Foyr将进一步整合专有技术与房地产项目,并扩大品牌在全球市场上的影响力。Foyr创始人兼执行总监Shailesh Goswami表示,通过向建筑商、建筑师和开发商提供先进的可视化技术,Foyr正在帮助房产消费者做出明智的决策。最新一轮融资将帮助Foyr加强其技术堆栈,并推出新的产品。Foyr提供定制的室内设计和端到端的全包服务,总部位于印度海得拉巴,主要在海得拉巴、斋浦尔和浦那开展业务。用户可以通过上传地板设计,获得免费的定制设计,并在接下来的45-60天内获得完整的室内设计解决方案。除了Foyr,印度家居领域还涌现了其他初创公司,如MyGubbi、Livspace、Urban ladder、Pepperfry、Housify和Furdo等。根据Technopak的报告,印度家居装饰市场规模在2020年将达到300亿美元。
印度VR家居装饰创企Foyr完成380万美元A轮融资

瞄准线下市场,大朋VR发布“天幕”大空间系统

为了解决线下VR门店无法满足消费者高质量VR体验需求的问题,大朋VR推出了名为Project Skyfall的大空间系统。目前市面上的大空间VR体验馆主要采用摄像头和激光定位两种解决方案,但存在成本问题和相互干扰难以实现多人同时交互等问题。Project Skyfall采用了自由空间光通信和时分键控编码等技术,旨在解决现有激光定位中基站间的信号相互干扰问题。根据大朋VR的介绍,“天幕”可以扩展至300平方米以上,支持20+用户同时交互。另外,大朋VR还开发了适用于大空间定位和设置的网格化网络和基站姿态自适应检测算法等技术,降低了多人定位方案的使用门槛。大朋VR创始人兼执行总监陈朝阳表示,Project Skyfall可以提升VR教育的新体验、增强线下体验店的可玩性,打造新的商业模式和创造更大的商业价值。
瞄准线下市场,大朋VR发布“天幕”大空间系统

开发日记:Rift Core 2.0的灵感、诞生、研发与革命性

Oculus推出了Rift Core 2.0,将为Rift带来全新的体验。Rift Core 2.0包括对Home首空间的翻新、重新设计的Oculus桌面应用和全新的系统界面Dash。Dash可以将PC的功能带入VR,让用户更容易切换应用、与朋友联系并在VR内进行更多操作。Oculus表示,Rift Core 2.0是通过对核心体验进行重新思考的结果,旨在提供更自然、更直观、更具触感的VR使用体验。而Home首空间的重建则使其更加身临其境、引人入胜和个人化。用户可以通过在Rift上收集的物品来定制Home首空间,并在其中展示和欣赏作品。在beta版本中,用户还可以分享自己的Home首空间,并与朋友一起创造和探索。Oculus表示,他们将继续添加新内容,支持用户更轻松地将自己创建的内容带入Home首空间。同时,Oculus表示他们将继续聆听用户的反馈和建议,以不断改进Rift Core 2.0的功能和体验。最后,Oculus强调Rift Core 2.0只是Rift新篇章的开始,他们有着雄心勃勃的计划,将在未来数年进一步发展和完善该平台。
开发日记:Rift Core 2.0的灵感、诞生、研发与革命性

为何不在床下找牛奶?心理学家用VR研究“情景认识”

法兰克福大学的心理学家Melissa Le-Hoa Vo教授在虚拟现实实验室中研究情景认识和视觉认知。她运用眼动追踪和虚拟现实场景,以及脑电位测量等方法,研究人们对环境的注意和记忆。在研究中,研究人员使用眼动追踪系统跟踪被试者的眼球运动,并使用虚拟现实头显系统模拟3D环境。他们希望了解人们如何组织环境,并与其中的对象进行交互。此外,研究小组还关注儿童情景认识的研究,并在幼儿园外的实验室中观察儿童对“不符合语法”的图片的反应。研究结果不仅对医药和安检等领域有应用价值,还有助于痴呆症患者的记忆。研究人员发现,如果被试者在一个场景中寻找并发现了特定物体,他们在记忆测试中的表现优于其他参与者。这意味着在视觉搜索中,与情景有更多互动的参与者能更好地记住对象。
为何不在床下找牛奶?心理学家用VR研究“情景认识”

什么是对象检测、识别与追踪

在九月底我们发表的文章《远落后于VR AR面临三大挑战:视场、分类、自适应设计》中,映维网强调了AR的重大挑战,其中就涉及与对象检测、识别、跟踪有关的分类。得益于英特尔的分享,今天的文章中,映维网可以与大家一同探索对象检测、对象识别和对象追踪这三个术语,了解三者的定义和彼此之间的区别。 下面,我们将参考字典,从而恰当地定义和判断“对象检测”、“对象识别”和“对象追踪”这三个术语。然后,我们将探索与每个流程有关的算法,来支持我们的定义。 “对象检测”和“对象识别”通常可以互换使用,应用的命名主要取决于编写程序的人员。“对象追踪”则常见于检测与识别算法公司。三者结合在一起能够实现更可靠的应用,但我们可能不清楚彼此的区别以及彼此的关联(对象追踪实际上只是对象识别的延伸吗?)。然而,我们可以首先参考一本标准的字典,查看与每个流程有关的算法,然后对这三者进行明确的区分。 整篇文章详细介绍了对象检测、识别和追踪的定义、算法以及它们之间的区别和关系。同时,文章也分享了代码示例来进一步探索这些算法和技巧。
什么是对象检测、识别与追踪

售价3999元,双6DoF控制Pico Neo VR一体机正式发布

虚拟现实技术公司Pico在北京举行的新品发布会上正式发布了Pico Neo VR一体机。Neo VR一体机分为商用版和基础版,商用版配备双6DoF控制器,基础版配备一只3DoF控制器。这款新产品将于预售开放,并可在天猫和京东平台购买。Neo VR一体机搭载高通骁龙835芯片,视场角为101度,支持内向外定位追踪,可实现6DoF头部和手部控制。它采用两块1440×1600的3.5寸快闪LCD显示屏,刷新率为90Hz,内存为4GB,最高支持256GB Micro-SD卡扩展。电池容量为3800mAh,游戏和影音续航时间可达3小时。此外,Pico Neo还支持HTC的Viveport内容平台,并已与18个主要视频平台接入。此外,Pico还发布了Pico Zense的TOF深度传感解决方案,其中包括两款核心硬件深度摄像头模组DCAM100和DCAM710。
售价3999元,双6DoF控制Pico Neo VR一体机正式发布