Facebook Reality Labs（FRL）首席科学家迈克尔·阿布拉什（Michael Abrash）认为，AR和VR将成为人们未来工作、娱乐和社交的主要方式。阿布拉什经常谈论他预计这些技术的基本里程碑将在何时实现，但在为期一年的新博客系列中，他希望深入了解实现这一目标的确切方式。

阿布拉什今天在一篇博客文章中透露了有关公司研究逼真化角色的更多信息，这是Facebook Reality Labs公司斯坦福分部的一项工作。
该分部称为“Codec Avatars”的项目使用他们所称的“突破性3D捕捉技术和人工智能系统”来生成逼真的虚拟角色，为未来快速简便的个人角色创建器提供基础。
FRL斯坦福分部的研究总监Yaser Sheikh表示，该想法是缩小物理距离，使虚拟现实中的社交连接“与现实世界中的社交一样自然和普遍”。
“这不仅仅是关于尖端图形或先进的动作追踪技术，”Sheikh说。“它关乎在虚拟现实中与人们互动变得像与你面前的人互动那样自然和轻松。挑战在于在人工环境中创造真实的互动。”
这归结为实现团队所称的“社交存在感”，并且克服令人不安的渊谷以提供可接受的逼真角色是他们多年来一直致力于的问题；该团队称这一过程为“通过自我测试和母亲测试”。
Sheikh坚持认为：“在你和你的母亲都喜欢你的角色之后，你们两个才会感觉在现实生活中般舒适地进行互动。这是一个非常高的要求。”
一个演示展示了两个VR用户与逼真角色进行对话，展示了未来VR角色可能的样貌。

公司表示，目前这类实时逼真角色需要相当大的设备才能实现。实验室的两个拍摄工作室——一个用于面部，一个用于身体——目前都是“庞大且不实用”的。
然而，最终目标是通过轻便的头戴式显示器来实现所有这些，尽管FRL斯坦福目前使用自己的原型装备了摄像头、加速度计、陀螺仪、磁力计、红外照明和麦克风的头戴式捕捉系统（HMCs）来捕捉人类表情的全部范围。
公司表示：“Codec Avatars需要捕捉你的三维轮廓，包括你的所有细微动作和那些使你在亲朋好友中立刻被认出的独特特质。”“而且，要让数十亿人每天使用Codec Avatars，制作它们必须简便而无需麻烦。”
实验室使用一小群参与者，每秒捕捉1GB的数据，以创建一个物理特征数据库。未来，希望消费者可以在无需拍摄工作室和太多数据的情况下创建自己的角色。

目前立体捕捉大约需要15分钟，并且需要大量摄像机才能创建最逼真的角色。然后实验室计划使用这些捕捉结果来训练人工智能系统，以便消费者可以仅通过几张快照或视频迅速轻松地创建Codec Avatars。
然而，人类的形状和大小千差万别，这本身也会带来挑战，FRL的研究科学家Shoou-I Yu表示。
“这使我更加欣赏每个人的独特之处。我们捕捉了头发夸张的人，戴着脑电图帽子的人等等。我们对带有耳环、耳垂环、鼻环等各种小细节进行了扫描，”Yu说。“我们必须捕捉到所有这些细微暗示，才能使一切正常运行。这既具有挑战性，又令人有成就感，因为我们致力于让你成为你自己。”
同时查看：泄露的扎克伯格邮件揭示Facebook的XR战略，“我们的目标不仅是取胜，还要加快其到来的速度。”
目前仍存在在前进的道路上还有许多挑战需要解决。Sheikh表示，一个令人担忧的大问题是“深度伪造”，即重新创建一个人的外貌或声音以欺骗他人。
Sheikh表示：“深度伪造对我们的远程实时传输项目构成了一种存在威胁，因为信任与沟通密切相关。”他说：“如果你在通话中听到你妈妈的声音，你完全相信你听到的就是她说的。尽管她的声音被一个嘈杂的话筒感应、压缩、传输数英里、在远端重构，并由一个不完美的扬声器播放，但你还是有这种信任。”
Sheikh表示，要达到这种级别的仿真形象，我们还需要几年的时间，尽管实验室目前正在探索通过一个真实账户来确保未来的仿真形象的想法，并为未来设备提供几种安全和身份验证选项。

Abrash表示，我们将会有更多关于光学和显示、计算机视觉、音频、图形、触觉交互、脑机接口以及眼部/手部/面部/身体追踪等方面的博客文章。