谷歌如何通过机器学习实现逼真AR实时自拍效果

增强现实(AR)是一种在物理世界上叠加数字内容和信息的技术,可以增强用户的感知。谷歌地图的AR功能可以让用户在现实世界中直接看到叠加的方向指示。YouTube Stories和ARCore新增的Augmented Faces API可以为自拍添加动画面具、眼镜和帽子等滤镜。实现这种AR功能的关键挑战之一是将虚拟内容准确地锚定在现实世界上,这需要一套独特的感知技术来追踪不同表面的几何形状。谷歌采用机器学习来推断近似的3D表面几何形状,不依赖于专用的深度传感器,能够实现实时的AR效果。谷歌的机器学习管道由两个实时深度神经网络模型组成,一个运行于整张图像上计算面部位置,另一个在这些位置上运行通过回归预测来近似表面几何。谷歌还为不同硬件设计了一系列模型架构,通过TensorFlow Lite实现机载神经网络推理,以提升性能并降低功耗。谷歌的努力为YouTube ARCore和其他客户端带来了逼真的自拍AR效果。
谷歌如何通过机器学习实现逼真AR实时自拍效果

郭明錤:苹果头戴式AR最快2019年Q4季度量产

尽管苹果的AR/VR头戴设备尚未正式发布,但已有很多泄露消息,同时映维网发现苹果申请了许多与AR/VR头显相关的专利,并在近期陆续公布。根据天风国际分析师郭明錤的研报,苹果的第一代头戴式AR装置将在2019年第四季度至2020年第二季度之间开始量产,这是AR商业化的重要里程碑。报道还指出,苹果的AR装置需要与iPhone手机连接,iPhone负责运算、连网、室内定位和室外定位等功能,而头戴式AR装置负责显示。正崴可能是苹果第一代头戴式AR装置的组装厂商。

2019年03月08日美国专利局最新AR/VR专利报告

眼镜基于提取的识别信息和存储的识别信息选择电子设备。眼镜通过与电子设备的设备信息配对来选择电子设备。以下是两个相关的专利。 第一个专利是关于三星电子设备的专利。该设备包括输入器和处理器。输入器接收双眼图像和立体图像,处理器利用双目图像检测立体图像中的用户观察点,并获取输入立体图像中的视差图。然后使用视差图来补偿检测到的观察点。 第二个专利是关于DigiLens波导光栅器件的专利。光波导具有至少两个全内反射(TIR)表面,其中包含光栅。当输入TIR光线以第一角度范围沿第一传播方向通过光栅时,光线经历至少两次衍射,并沿第二传播方向引导至独特的TIR角度范围。 这些专利针对眼镜和电子设备之间的交互以及波导光栅器件的光传输技术提供了创新解决方案。近期,美国专利及商标局公布了一批新的AR/VR专利,其中包括:AT&T的增强现实零售系统,该系统通过社交网络获取产品信息并提供给消费者设备;ODG的色差减少的紧凑型光学元件,该元件通过调节照明光源降低图像中的色彩伪影;Adobe的虚拟现实设备的用户识别与认证过程,该方法基于用户的交互数据生成唯一访问者指纹;苹果的用于头戴式显示器的热管理和包含调节机制的头戴式显示器等专利。其他专利还涉及眼形模型、点云几何压缩、射流泵与闩锁、帧渲染装置等。索尼、谷歌、英特尔、三星和微软也有相关专利。这些专利涵盖AR/VR领域的各个方面,如图像处理、眼镜配对、头显安全等。
2019年03月08日美国专利局最新AR/VR专利报告

小派科技推出全新消费版VR头显,5K Plus和5K XR京东首发开启限量预订

小派科技于3月8日推出了全新的下一代消费版VR头显Pimax 5K Plus和Pimax 5K XR,并在国内开启限量预订。Pimax 5K Plus是在Kickstarter众筹和全球预售中获得海外用户支持的明星产品,目前已在京东和官网上架,官方售价为5399元。Pimax 5K XR原为商业版本,在海外展示中得到了玩家的喜爱,此次更名为Pimax 5K XR,并于3月17日在京东和官网上架,官方售价7699元。Pimax 5K Plus和Pimax 5K XR拥有200度视场角和双眼5K的分辨率,给用户带来接近人眼自然视场角的高清视界,从而获得更好的沉浸感。两款产品还具有轻量机身和人体工学设计,以及强大的兼容性和多人追踪能力。此外,小派科技与NVIDIA合作,为用户提供更好的沉浸感体验。小派科技创始人表示希望将海外用户喜爱的产品带给国内用户,让更多的用户获得VR体验的升级。
小派科技推出全新消费版VR头显,5K Plus和5K XR京东首发开启限量预订

玩《Pokemon Go》过分投入被枪杀,美国法院认定二级谋杀罪成立

2017年1月26日晚,60岁的华裔陈建生在弗吉尼亚州的一个社区停车场被一名保安射杀。该案日前正式宣判,法院认定保安乔纳森·克伦威尔犯有二级谋杀罪,可能面临5年至40年刑期。 事件发生当晚,陈建生在玩《Pokemon Go》时进入了社区并停在车内。由于过分投入游戏,语言不通,保安怀疑他是私闯者并开枪致使其当场死亡。 美国经常出现因私闯住宅而被主人击毙的案件,这是因为个人对私有财产保护的意识和美国宪法对公民财产的保护。但需要指出的是,只有在特殊情况下主人才能击毙私闯者,否则可能面临谋杀罪起诉。 对于《Pokemon Go》这种基于位置的游戏,由于用户需要不断移动,容易忽略周围环境,尤其容易误闯私人领地,因此在美国尤其需要注意安全。尽管开发商Niantic已采取一系列策略解决这个问题,但我们建议玩这类游戏时要特别注意安全。
玩《Pokemon Go》过分投入被枪杀,美国法院认定二级谋杀罪成立

Greelight发布2018资本报告:投资+收购达28亿美元

根据Greelight Insights发布的最新报告《2018 VR/AR Year-End Funding Review(2018年VR/AR年终融资报告)》,2018年XR投资与并购收购案达到了创纪录的28亿美元,其中大部分来自早期阶段的融资。自2014年以来,总交易额的增长率达到了近300%,但2018年的交易数量下降了三分之一。 报告指出,投资者对企业解决方案和垂直领域解决方案最感兴趣,相关的交易数量较2017年大幅增长,占2018年总交易数的一半。报告还列举了2018年XR领域的主要厂商,发现大部分投资来自传统风投,表明他们对这一行业有更大的信心。此外,英特尔和Facebook是自2014年以来收购VR/AR初创公司数量最多的企业。 Greelight首席执行官克利夫顿·道森表示,这些发现显示XR行业的发展非常健康,并朝着积极的方向发展。在娱乐和企业应用程序方面都有强劲的增长和优秀的成绩。随着技术的进步和更多积极的投资回报率数据的推动,预计XR行业在2019年将继续稳健增长。
Greelight发布2018资本报告:投资+收购达28亿美元

微软将举行六期直播秀,全方位介绍HoloLens 2

微软计划通过一系列名为"The Realities Show"的直播节目来推广新一代HoloLens。这些节目将从3月12日开始,在旧金山的Mixed Reality Capture Studios进行直播,共分为六集。第一集将回顾HoloLens 2在世界移动通信大会上的盛大发布。接下来的几集将分别介绍HoloLens 2的输入方法、眼动追踪、基于物理的交互、与3D内容的交互,以及显示器、视场和技术设计方面的考量。最后两集将涉及空间计算,并在美国阵亡将士纪念日假期前后播出。节目预计将于6月14日结束,并介绍MixedRealityToolkit(MRTK)和在Unity中的实机演示。尽管这种推广方法可能引发一些风险,但微软有望从Magic Leap的经验中吸取教训。感兴趣的观众可以在Microsoft Mixed Reality Events页面上找到直播链接。
微软将举行六期直播秀,全方位介绍HoloLens 2

Valve解雇13名员工,涉及VR硬件团队

据映维网报道,游戏公司Valve近日确认解雇了一些全职员工和合同工,这可能与虚拟现实(VR)硬件团队有关。尽管Valve发言人Doug Lombardi表示这并不代表公司存在重大变故,但部分认为这些被解雇员工很可能是VR团队的一部分。此前有匿名员工在Reddit发帖称Valve最近解雇了一半的硬件团队。虽然具体是哪个部门的员工被解雇并没有证实,但这可能与Valve决定专注于VR而非支持增强现实(AR)的Jeri Ellsworth有关。另外,Valve唯一已知的硬件项目是VR设备和Steam Controller。尽管报道中未明确Valve是否退出VR市场,但有报道指出Valve可能退出硬件市场,但继续运营SteamVR软件商店。目前还不清楚Valve的具体决定,但好消息是Knuckles驱动已进行更新,Valve正在继续招募VR与硬件软件工程师,并且Oculus和HTC也发布了2019年款头显,Valve可能会在今年发布相关消息。
Valve解雇13名员工,涉及VR硬件团队

Oculus Rift在多家在线渠道售罄,或为Rift S迭代让路

根据线索显示,Oculus Rift的线上商店库存已经售罄,可能是消费者需求暴增或者Oculus正在调整库存以为下一代产品让路。据报道,美国的一些在线渠道以及欧洲的一些零售合作伙伴,包括New Egg、Best Buy、Microsoft Store、Micro Center、Media Markt、Curry's和Game等,都已经售罄了Rift设备。目前只有少数在线零售商仍然提供Oculus Rift + Touch的捆绑包。Facebook表示Oculus官网和其他渠道仍然有Rift设备供应。有报道称,Facebook曾对下一代Rift(代号为Caspar)进行重新设计,但目前更倾向于产品更新而搁置这一项目。据称新设备的名称可能是“Rift S”,并可能会使用Oculus Quest为VR一体机开发的内向外追踪技术。由于Quest和“Rift S”是针对不同细分市场,所以根据Facebook调整初代Rift库存以为下一代产品让步是合理的。
Oculus Rift在多家在线渠道售罄,或为Rift S迭代让路