Nweon

以多人社交为重点的VR RPG游戏《A Township Tale》将于7月14日在Quest上架。开发商Alta发布了PC版和一体机版的画质对比视频演示。尽管这款游戏最初是PC版本，但开发商成功地将游戏的开放世界移植到低功耗设备Quest上，同时避免对图像分辨率的影响。为了支持低端硬件，开发团队在玩家周围设置了一道浓雾墙，以减少必须绘制的内容数量。然而，团队希望玩家在远眺时能看到各种地标，因此保留了附近建筑和物体的坚实质量。开发团队从Quest版本中删除了阴影和透明度，因为它们对性能要求过高。游戏的售价为9.9美元，预购将于7月13日开始。

VR医疗培训平台Osso VR近日宣布完成2700万美元的B轮融资，由GSR Ventures领投，Signalfire、Kaiser Permanente Ventures、OCA Venture、Scrum Ventures、Leslie Ventures和Anorak Ventures等多家机构参投。Osso VR由工业光魔、艺电、微软和苹果等公司的成员组成，旨在为外科医生提供沉浸式环境，让他们可以在安全可控的条件下练习手术操作。 除了提供无风险的培训环境和性能分析外，Osso VR还通过允许外科医生进行练习来弥合距离，以及观摩学习远程培训课程。该平台可以在虚拟现实环境中提供一对一或一对多的教学设置。 受疫情推动，虚拟培训需求大幅增长，Osso VR在2020年经历了快速增长。该公司已与强生、史崔克和施乐辉等行业巨头合作，并将业务扩展至骨科、内窥镜检查、介入手术等多个领域。Osso VR的平台已在全球20多个国家部署，提供了近30000次培训，平均每月培训时间达到22000分钟。布朗大学、纽约特种外科医院、约翰霍普金斯大学和拉什大学等多个住院医师项目都采用了Osso VR的平台。 GSR Ventures表示，Osso VR的定位是改变外科医生的培训方式，提供比以往任何外科培训平台更高效、更具亲民性和更有效的沉浸式体验。Osso VR首席执行官兼联合创始人贾斯丁·巴拉德表示，他们计划以指数级速度扩展内容库和平台，助力全球每一位患者安心使用最安全、价值最高的治疗程序。

以用于分割任务 在几个常见的点云数据集上的实验证明了我们方法的有效性 尤其是在少样本情况下 我们的方法能够取得较好的性能并推广到未见过的类别 鉴于我们的方法可以通过少量标注数据实现不同类别的分割 这对于实际应用中标记难以获取的新类别非常有帮助 且能提高数据的利用效率 最后 我们通过可视化结果和对比实验进一步验证了我们方法的优越性

相关论文 ： Few-shot 3D Point Cloud Semantic Segmentation

这篇文章总结了一系列与XR相关的论文。这些论文涉及各种不同的XR领域，包括点云语义分割、摄像头定位、人体姿势估计、3D物体检测、手部重建、场景点云流估计、视频实例分割、对象姿态估计、人体动作传递、深度图融合、人脸重建、6D姿态估计、极化图像法线恢复、场景流估计和动作识别等。 这些论文介绍了各种新颖的方法和技术，以解决XR领域中的各种问题。它们使用深度学习、神经网络和其他计算机视觉技术来提高点云处理、图像生成、物体检测、姿势估计和动作识别的性能。这些方法的创新之处在于利用了各种数据源（如RGB图像、深度图像和偏振图像）进行特征提取和表示学习，并在不同任务之间共享信息。 这些研究对于推动XR技术的发展和应用具有重要的意义，可以为虚拟现实、增强现实和混合现实等领域的开发提供有力的支持。它们提供了新的思路和方法，为XR体验的改进和创新提供了潜在的机会。

纽约特种外科医院的创新研究所与VR Electronics达成合作伙伴关系，共同开发基于全身触觉反馈套装Teslasuit的技术。这项合作旨在利用沉浸式XR训练技术和全身传感器评估来改善人体运动和身体康复。纽约特种外科医院将结合自身的肌肉骨骼健康知识和Teslasuit提供的智能技术，包括生物测量、运动捕捉和触觉反馈等，提升患者健康、伤害预防、诊断、治疗和恢复。Teslasuit套装融合了触觉反馈生物测量技术和先进的动捕系统，能够提供广泛的触觉反馈和实时跟踪数据，支持详细而专业的分析。VR Electronics的首席执行官表示，将Teslasuit的技术应用于创新医学，并结合他们的技术和专业知识，可以显著提高患者护理质量。此次合作将扩大VR领域的领先地位，并为未来的医疗保健解决方案提供动力。

开源3D引擎Open 3D Engine（O3DE）已经作为Linux基金会旗下Open 3D Foundation的第一个项目向社区开放。该引擎由亚马逊旗下的Amazon Web Services（AWS）基于游戏引擎Lumberyard的更新版本开发而来。O3DE引擎允许开发者和创作者构建不受商业条款限制的3D体验，并通过论坛、代码库和开发者活动向开源社区提供支持和基础设施。O3DE的功能包括多线程照片真实感渲染器、可扩展的3D内容编辑器、数据驱动的角色动画系统和基于节点的可视化脚本工具。该引擎为游戏开发者提供了使用C++、LUA和Python的灵活性，而动画师、技术美术和关卡设计师等内容创建者可以直接利用内置的创作工具来创建3D体验。Open 3D Foundation和Open 3D Engine Project将帮助开发者合作构建游戏和模拟，以及底层引擎。AWS表示，他们相信创造一个开源的、社区驱动的实时3D引擎选项将改变实时3D开发。

本文介绍了XR领域的36篇相关论文和研究成果。其中，包括基于点云的位置识别、视频测视、大景深立体成像、人脸老化、在线三维重建、人体运动捕捉等多个方向的研究。这些论文提出了各种基于深度学习和神经网络的方法，以解决在VR/AR领域中的具体问题。例如，通过自注意机制和方向编码对点云数据进行位置识别；利用姿态视频流进行多视点深度预测；通过引入相位掩模来增加大景深立体图像的质量等。这些研究成果不仅提高了XR技术的性能和效果，还为VR/AR应用的发展提供了新的思路和方法。映维网报道了2021年计算机视觉和模式识别大会（CVPR）收录的一些与增强现实/虚拟现实相关的论文。这些论文涵盖了一系列计算机视觉研究领域，包括对象映射与渲染、3D人类姿态生成、语义分割和透明对象关键点估计等。其中一些值得关注的论文包括：基于结构光和重建的主动立体摄像头方法、可视化的双耳音频生成方法、在野外环境中的注意力引导注视目标检测方法、隐私保护定位和映射方法、像素对齐的体三维化身方法、利用波浪光模型进行单眼深度估计的方法、从单幅图像中实现全身捕捉的方法、优化接触以改进抓取的方法、将平面图转换为三维场景的方法、使用自监督学习进行姿态估计的方法、利用稀疏性进行高效推理的图像超分辨率方法、生成全身人体化身的模型等。这些论文的研究对于推动增强现实/虚拟现实技术的发展具有重要意义。

国内知名VR品牌Pico宣布举办Pico VR冠军杯《超能军团》全球争霸赛。据统计，截止到7月2日，已有1000多人报名参赛。为响应玩家的参赛热情，Pico宣布将报名截止时间延长至7月11日。此前，为了方便没有Pico Neo 3的玩家参赛，Pico开放了租赁通道，只需每月支付200元即可租借旗舰级VR一体机Pico Neo 3。比赛的奖励丰厚，冠军可获得《超能军团》定制手办、奖杯和10000元现金奖励。亚军和季军也有丰厚奖金。除前三名外，其他前40强选手也可获得现金奖励。此外，Pico还邀请知名游戏主播在虎牙直播平台助阵比赛，并将定期安排福利挑战赛。比赛预计在7月下旬和8月初进行初赛和决赛，之后还将有全明星表演赛。感兴趣的玩家可以关注Pico VR的B站、微博和官方公众号获取更多赛事信息。

《ManipNet: Neural Manipulation Synthesis with a Hand-Object Spatial Representation》是由爱丁堡大学、香港大学和Facebook Reality Labs的团队发表的论文。该论文提出了一种使用手部-对象空间表示进行神经操纵综合的系统。团队训练了一个能够根据控制信号和对象几何特征预测手指姿势的神经网络。网络使用深度神经网络ManipNet作为自回归模型，逐帧生成双手的详细手指姿势。为了提高网络的通用性，团队引入了三种虚拟传感器来编码对象的几何结构及其与手的空间关系。研究人员表示，该系统可以合成各种手指姿态，用于协调双手任务或进行手部操作，并展示了它在游戏和AR/VR中的实时交互潜力。然而，该研究还存在一些局限性，如数据可变性、物理合理性、合成数据捕捉成本高昂等，但研究人员希望这些发现能够激发社区的新想法和探索。

上海高校工程中心与影创科技集团进行了合作交流学习活动。活动中，师生们参观了影创科技位于浦东新区的大厦，体验了全息人像系统和鸿鹄MR智能眼镜等最新技术，同时在智慧展厅中体验了MR技术在不同场景下的应用。双方还在影创大厦会议室进行了座谈，分享了公司产品及技术研发情况，介绍了学院的专业概况和研究团队情况，以及讨论了多个研究领域的进展和技术局限性，并探讨了多种技术融合的可能性。通过此次活动，师生们切实感受到了前沿技术和未来发展方向，并期待未来进一步加强双方的合作，为科技进步做出贡献。

Tactile Echoes是一种增强现实系统，可以为用户提供桌面触屏应用中的触觉回声体验。该系统通过摄像头追踪手指，并为每个区域分配相应的触觉回声。用户可以在触摸桌面时听到空洞回声声音。该系统可以用于游戏、娱乐和研究等多种目的。这个系统不需要任何设备介入用户指尖和接触面之间，用户可以自然地享受视觉、触觉和听觉增强。研究团队将设备与智能投影仪、VR或AR头显相结合，从而让用户可以“触摸”真实环境中的虚拟对象，并体验增强的图形、声音和触觉反馈。研究人员通过用户实验测试了Tactile Echoes的效果，在一个交互式增强现实游戏中，用户报告说该系统的反馈提高了反应能力和参与度。尽管Tactile Echoes目前只是一个原型，但研究人员表示有兴趣与企业合作商业化这项技术，并探索其在增强现实游戏、音乐设备和教育系统中的应用前景。