Insider Insider

Nweon

nweon 文章

Meta研究两步合成分析方法估计Avatar高分辨率人脸纹理

虚拟现实(VR)和混合现实(AR)在创建真实感的虚拟人物和人脸渲染方面取得了巨大进展,特别是随着硬件的普及。然而,在不同光照条件下逼真地渲染人脸是一个困难的问题,涉及到面部几何形状和皮肤纹理的精确重建。过去的解决方案需要专业设备和专家监督来记录数据。在一项名为《使用偏振智能手机图像捕获高解析度人脸外观》的研究中,慕尼黑工业大学、马克斯·普朗克智能系统研究所和Meta的研究人员提出了一种使用智能手机和廉价偏振片的捕获装置,使个人用户能够重建自己的面部,同时减少质量损失。研究人员通过拍摄交叉偏振和平行偏振的视频序列和照片,并通过优化算法来恢复人脸的纹理和几何形状。他们的方法在实验中取得了令人印象深刻的结果,为数字人脸资产的创建提供了实用且经济的解决方案。
Meta研究两步合成分析方法估计Avatar高分辨率人脸纹理

苹果AR/VR专利申请多视图视频解码器

AR/VR注视点成像是基于图像内的感兴趣区域,即用户注视点来改变整个图像的图像分辨率,从而优化负载。苹果公司提出了一种名为“Multi-view video codec”的多视图视频解码器的专利申请。图中展示了使用鱼眼摄像头捕获的图像,并将其划分为不同的圆形区域,每个区域都有不同的高分辨率内圈和低分辨率外圈。通过在不同副本之间交换具有不同高分辨率区域和重叠区域的图像流,实现平滑的过渡。图像流的编码副本可以根据用户的注视位置进行确定,并提供给播放设备。通过在感兴趣区域和更新感兴趣区域之间混合编码副本,并进行渲染和显示,可以生成自适应的注视点图像流。该技术可以优化图像质量和传输带宽,提供更好的用户体验。该专利申请最初于2022年9月提交,并最近被美国专利商标局公布。
苹果AR/VR专利申请多视图视频解码器

微软分享:制造业趋势,工业元宇宙正在彻底改变工业

微软认为工业元宇宙是重塑制造业的关键趋势之一。工业元宇宙利用云计算、数字孪生、混合现实和机器学习等技术,实现对物理世界的实时理解和交互。微软正在投入大量资金来推动这一技术革命,并通过混合现实将数字信息与物理系统相结合,以创新的方式帮助组织提高生产力、安全性和效率。 另外,微软还探讨了制造业的其他三个关键趋势,包括增强互联员工能力、建立弹性和敏捷的供应链,以及人与人工智能携手的智能工程和工业元宇宙工厂。微软提供了解决方案来支持智能工厂、简化一线运营、加强沟通与协作,并帮助制造商提高供应链弹性。此外,微软还展示了人工智能在产品设计、工程、制造和运营中的应用,并探索了可持续性和能源优化的重要性。 微软强调这些创新将帮助建立一个更强大、更有韧性和更可持续的未来。
微软分享:制造业趋势,工业元宇宙正在彻底改变工业

高通与神木科技合作,为骁龙Spaces XR平台提供中国市场本地化服务和技术支持

高通与神木科技宣布合作,为中国市场的骁龙Spaces XR开发者平台提供本地化服务和技术支持。他们计划加速基于骁龙Spaces的XR应用创新,并扩展骁龙Spaces在中国的开发者生态系统。预计骁龙Spaces社区工具和开发者套件将于2023年夏季推出。骁龙Spaces XR开发者平台支持OpenXR,集成了领先的3D引擎,如Unreal Engine、Lightship开发者平台和Unity AR套件。神木科技将为开发者提供对Unity和Unreal的骁龙Spaces开发者套件的本地化支持,并提供与骁龙Spaces软件平台和接口适配的工具和技术支持。神木科技还建立了一个官方的中文开发者社区,并推动相关行业标准的制定。他们还将与OEM设备厂商合作,支持骁龙Spaces开发者套件中硬件的申请和交付。高通创投已对神木科技进行了投资,认为神木科技在推动中国XR生态建设方面发挥重要作用。
高通与神木科技合作,为骁龙Spaces XR平台提供中国市场本地化服务和技术支持

Meta为AR/VR光学显示探索蝴蝶结纳米天线阵列组成

纳米结构与光的相互作用是一个研究热点,通过金属/电介质界面产生的表面波或表面等离子体激元可以实现对电磁场的亚波长操作,这在集成光学中具有潜在应用,如波导、传感、高分辨率显微镜以及AR/VR等。一项名为《蝴蝶纳米天线阵列的远场:模拟研究》的论文研究了蝴蝶结纳米天线阵列的等离子体纳米结构的建模和模拟,并通过扫描近场光学显微镜对金属纳米图案样品进行了实验研究。对样品的建模使用了时域有限差分(FDTD)方法。研究发现,在纳米结构表面不到10nm的距离处可以观察到光限制效应,而随着距离的增加,细节逐渐消失,这表明光限制是由倏逝波引起的。相比扫描近场光学显微镜的实验结果,模拟结果在近场光限制效应方面与之吻合。通过模拟研究发现,在亚波长孔径下,光束的约束更强。
Meta为AR/VR光学显示探索蝴蝶结纳米天线阵列组成

Magic Leap与英伟达合作,集成Omniverse渲染到Magic Leap 2

Magic Leap宣布与NVIDIA合作,共同提供一种离线计算1:1比例的3D数字模型并将其流式传输到Magic Leap 2。团队已经构建了NVIDIA Omniverse扩展,这将允许企业用户在不影响视觉质量的情况下,从NVIDIA Omniverse渲染全尺寸数字孪生并流式传输到Magic Leap 2。Magic Leap与Omniverse的集成目前处于早期阶段,预计将于今年上半年正式发布。之前由于计算限制,渲染的视觉质量很有限,但现在Magic Leap构建了Omniverse扩展,使得客户可以在Magic Leap 2上渲染全尺寸数字孪生并流式传输,且无需转换或优化常见的企业建模工具。团队表示,基于通用场景描述USD格式的3D内容可以立即在Magic Leap 2上查看,并且可以实时编辑和协作。通过一系列的技术突破,Magic Leap 2与NVIDIA RTX GPU共同解决了延迟等常见挑战,并为AR模型提供了新的视觉细节。Magic Leap表示将继续与NVIDIA合作,推动企业数字孪生技术进步,为企业用户提供更大的价值。
Magic Leap与英伟达合作,集成Omniverse渲染到Magic Leap 2

彭博社:XR头显、XROS将是苹果WWDC23的全场焦点

彭博社的马克·古尔曼在最新一期的《Power On》中再次强调,苹果计划在6月6日举行的WWDC开发者大会上发布首款XR头显,并有望在欧美假日季之前推出。古尔曼还表示,这款全新的产品将成为苹果未来构建的重要组成部分,许多高管认为它有潜力最终替代iPhone。据消息人士透露,苹果还将为开发者提供关于如何使用这款头显的清晰故事,并且WWDC会议的重点将集中在展示相关的应用商店和开发工具上。苹果将于北京时间6月6日至10日以线上形式举行WWDC大会,主要发布内容包括首款XR头显、相关的XR操作系统和开发工具,不过实际发售日期可能需要几个月的时间,以便开发者能够构建相应的XR应用和服务。古尔曼补充说,苹果原本计划在3月举行一次独立的发布会,然后在9月发布,但由于发布会推迟到6月以及生产问题,苹果最早也要到欧美假日季之前才能推出头显,如果能在假日季之前及时上市,苹果将会感到高兴。
彭博社:XR头显、XROS将是苹果WWDC23的全场焦点

微软如何为Dynamics 365 Guides设计全新的注释功能

微软发布了Dynamics 365 Guides 8.0的更新版本,为混合现实工具增加了一组旨在提高用户体验和直观感的功能。其中包括优化注释功能,允许用户在任何地方进行注释,将注释功能带入混合现实。通过这种方式,远程参与者可以在HoloLens操作员的视场中直接进行注释。此前,D365 Guides中的注释仅限于在HoloLens生成的网格上放置注释,适用于简单平面场景。而现在,微软希望为用户构建可靠、准确和特别的体验,为此,团队进行了广泛测试,探索了改进注释的方法,并最终提出了两种新的改进方案:智能平面注释和直接着墨。通过这些改进,Dynamics 365 Guides的注释体验得到了显著提升,远程专家现在能够在复杂表面进行绘制,并相信注释会按照他们的预期出现。此外,微软还引入了触摸交互模式,使HoloLens操作员能够轻松分享他们的想法。微软表示,他们将继续更新D365 Guides,改进稳定性并引入新功能,同时期待看到客户如何利用改进的注释来增强和创建新的工作流程。
微软如何为Dynamics 365 Guides设计全新的注释功能

VR益智作品《A Knight in the Attic》登陆Quest和Steam

《阁楼骑士》是一款VR益智作品,故事发生在一个失踪国王和岌岌可危的王国中。玩家需要指导骑士吉尼维尔从祖母的阁楼中拯救世界。游戏通过倾斜游戏板以调整重心来引导滚球通过迷宫,达到终点。游戏由Mighty Yell开发,玩家可通过Steam和Meta Quest购买,售价分别为人民币42元和9.99美元。 游戏中的迷宫被打造成一个完整的世界,玩家需要帮助吉尼维尔通过转动曲柄、将障碍物锤入地面、收集魔法卷轴等方式,穿过王国。游戏带来了对圆桌骑士神话的轻松演绎,玩家可以坐着舒适地体验整个游戏。开发者还建议在雨天穿上大号毛衣以增加游戏的氛围。 如果你准备好拯救王国,你可以在Steam和Meta Quest上购买《阁楼骑士》,售价分别为人民币42元和9.99美元。
VR益智作品《A Knight in the Attic》登陆Quest和Steam

2023年04月17日Quest、Steam最新VR游戏畅销榜

据映维网报道,最新的畅销VR游戏列表显示,Meta Quest、Meta Rift和Steam平台上的游戏是目前市场上热门的VR游戏。Rift Store和Steam是主流的PC VR内容平台,而Meta Quest则是国外主流的一体式6DoF移动VR平台。需要注意的是,这些畅销游戏列表是实时变化的,括号内的价格是原价。 报道中还提到了Steam VR游戏应用的前十名、Meta Quest游戏应用的前十名以及Meta Rift游戏应用的前十名,这些列表显示了当前最受欢迎的VR游戏。 文章附带了一张图片,展示了排名前十的畅销游戏列表,但图中的具体内容并未提及。
2023年04月17日Quest、Steam最新VR游戏畅销榜