Nweon

nweon 文章

Meta VR专利为VR视频快照的闪烁、伪影问题提出解决方案

Meta在一项名为“Temporal approximation of trilinear filtering”的专利申请中提出了一种用于VR系统的时间三线性滤波方法。该方法利用N帧序列来呈现视频的场景快照,并通过对每一帧在帧特定mipmap level执行双线性滤波来近似实现三线性滤波。在实施过程中,计算设备可以预先计算包括多个mipmap level的纹理的mipmap,并根据像素网格的纹理比例和每帧的mipmap level确定因子来选择纹理的mipmap level。然后,计算设备可以基于所选择的mipmap level对每帧进行纹理采样,并按顺序显示渲染的N帧以表示场景的快照。通过这种方法,可以减轻混叠伪影和闪烁现象。此外,Meta的该专利申请还提到了其他相关专利,并描述了示例性帧特定因子和示例性双线性纹理滤波方法。该专利申请最初于2021年8月提交,并在最近由美国专利商标局公布。
Meta VR专利为VR视频快照的闪烁、伪影问题提出解决方案

Meta分享:Quest Pro眼动注视点渲染的原理、实践和应用

Meta在Connect 2022大会上推出了基于眼动追踪的注视点渲染功能Eye Tracked Foveated Rendering(ETFR)。这种图形优化技术可以利用眼动追踪,在注视点区域渲染高像素密度,而在外围区域渲染低像素密度,从而节省大量的GPU算力。ETFR可以轻松集成在Unity和Unreal中。开发者反馈表示ETFR在《Red Matter 2》中的效果令人印象深刻,像素密度增加了33%。ETFR的工作原理是通过眼动追踪摄像头计算注视方向,并在应用渲染管道中移动高像素密度的注视点区域。ETFR使用了一个新的Vulkan扩展,Tile Offset,用于平滑地移动注视点区域。ETFR的API架构是基于现有的XR_FB_foveation框架扩展而来的。使用ETFR可以获得额外的GPU算力,并根据当前负载自动调整foveation level。然而,ETFR可能不适合所有类型的应用程序,需要在性能和视觉质量之间进行权衡。
Meta分享:Quest Pro眼动注视点渲染的原理、实践和应用

Meta分享:AR智能眼镜Ray Ban Stories的研发幕后

Meta和Ray Ban在2021年合作发布了第一代智能眼镜Ray Ban Stories。这款设备售价299美元,可以拍摄照片和视频,分享冒险经历,并能听音乐或打电话,以保持与朋友、家人和周围世界的联系。 在背后的研发故事中,Meta工程师在2020年夏天开发了首款智能眼镜Ray Ban Stories,但由于疫情原因,团队无法进入测试实验室。为了解决充电问题,工程师在家中建立了一个快速设计和验证站进行跌落测试。 Meta将智能眼镜视为朝真正增强现实眼镜发展的一步,认为用户必须能够在日常生活中使用智能眼镜,如滑雪时拍摄视频、给宠物拍照或跑步时听音乐等。 在开发过程中,Meta和EssilorLuxottica团队合作打造时尚且令人每天都愿意穿戴的眼镜。团队通过远程工作、创造力和协作克服了疫情带来的障碍。 Ray Ban Stories作为Meta的第一款智能眼镜,提供了一种独特的方式来保持与生活中的每一刻保持联系,团队也在不断改进和增加功能。团队将为Ray Ban Stories带来基于用户电话号码的免提通话和短信功能,并持续构建设备的未来版本。
Meta分享:AR智能眼镜Ray Ban Stories的研发幕后

传腾讯已正式解散AR/VR团队

据36氪报道,腾讯XR业务线的不同部门收到了临时代管的总经理和人力资源部门的通知,宣布取消XR全线岗位。公司内部将有300多名员工获得两个月缓冲期,在此期间可以寻找内部转岗或外部求职机会。具体报道详见36氪链接:https://36kr.com/p/2134203581688836

彭博社:苹果选定在WWDC 2023大会发布VR/MR头显

据苹果泄露爆料人士郭明錤和彭博社的报道,苹果可能在今年春季期间或6月的WWDC大会上发布首款AR/VR头显。但最新彭博社的报道称,苹果已放弃春季发布计划,选择在WWDC大会上发布该产品,并命名为Apple Reality Pro。综合彭博社和The Information的情报,该头显将有单眼4K显示屏、120度视场角、眼手控制和类iOS界面。用户可以在虚拟现实中可视化Mac桌面,并使用物理键盘和鼠标控制。头显搭载Mac级M2处理器和专用芯片,用于处理增强和虚拟现实视觉效果,并带有外接电池,续航时间约为2小时。售价预计在3000美元左右。报道还指出,苹果计划在2024年或2025年初推出价格约为1500美元的“亲民版本”,与Meta Quest Pro竞争。苹果正在讨论采用成本更低的组件实现更亲民的头显版本,该版本最早将于2024年或2025年初发布。
彭博社:苹果选定在WWDC 2023大会发布VR/MR头显

开发商分享:Rogue-like射击游戏《The Light Brigade》的枪战介绍

备受期待的VR Roguelike射击游戏《The Light Brigade》将于2月22日登陆各大头显,例如PSVR 2、SteamVR和Meta Quest。游戏由Funktronic Labs开发,提供激烈的枪战体验和身临其境的光之魔法。在游戏中,玩家需要成为抵抗黑暗的最后一道防线,在生成的战场中对抗潜伏在各个角落的敌人,利用步枪和光之魔法进行战斗。 《The Light Brigade》采用了受世界大战启发的武器,如Gewehr 43、M3冲锋枪和南部14式手枪,并注重逼真的枪战体验。玩家可以通过装载魔法来增强步枪的攻击,并使用魔法咒语进行施咒。游戏还采用了Roguelike玩法,玩家可以通过击败敌人并收集装备来提升战斗能力。此外,游戏还提供了异步多人玩法,玩家可以与其他在线玩家交互,或者从NPC盟友处获取帮助。 通过解救被困灵魂并升级装备和技能,玩家可以不断提升自己的战斗能力。游戏的战场是根据逝去者的旧记忆生成的,每次冒险都会有新的环境变化。此外,玩家还可以收集塔罗牌,每张塔罗牌都具有特殊能力,可以增强玩家的战斗效果。最终,玩家需要发现世界的真相,并做出相应的选择。
开发商分享:Rogue-like射击游戏《The Light Brigade》的枪战介绍

谷歌专利探索折射分束凸透镜的Pancake方案,带来更低光学像差

谷歌提交的一项名为“Near-eye optical system implementing a waveguide with an output viewer element having a refractive beam-splitting convex lens”的专利申请揭示了一种使用折射分束凸透镜的Pancake透镜实现,以改善AR/VR设备的光学性能。该透镜采用折射分束凸透镜来折叠光路并减小系统尺寸,实现更低的光学像差,允许用户感知更小的显示像素和支持更大的视窗。由全内反射技术实现的波导将显示光从显示器耦入接口传输到耦出接口,在耦出接口中设置Pancake光学元件来投射组合的显示光和场景光到用户眼睛的预期位置。该光学系统具有较低的光学像差、色差和像散,无需进行太多计算处理来校正相关差异。另外,折射分束凸透镜可以调节光学系统的光学性能,使耦出接口提供任何期望的optical power。该光学系统的设计可以显著减少世界侧光泄漏量。谷歌的这项专利申请于2020年8月提交,并已公布。
谷歌专利探索折射分束凸透镜的Pancake方案,带来更低光学像差

LG为XR小型化发布70μm超薄可折叠2-Metal COF覆晶薄膜

韩国LG Innotek最近发布了针对XR设备的2-Metal COF产品。COF是覆晶薄膜的简称,主要用于连接显示器和电路板。2-Metal COF在一片膜的两侧形成精细电路,并允许快速传输电信号,以支持高清图像的处理。这款2-Metal COF覆晶薄膜厚度为70μm,是目前最薄的半导体衬底之一,而且可折叠,从而减少安装空间。该公司的高管表示,2-Metal COF增加了显示像素,最大化了沉浸式体验,是决定XR设备性能的重要组成部分。除了积极研发XR市场的产品,LG Innotek还在加大营销力度,并计划在北美和日本开展促销活动,以拉大与竞争对手的差距。预计随着全球科技巨头进军元宇宙产业,对最新产品的需求将大幅增加。
LG为XR小型化发布70μm超薄可折叠2-Metal COF覆晶薄膜

前苹果VR项目员工:苹果发VR时将是PC时代Macintosh时刻

苹果公司于2017年以3000万美元的价格收购了加拿大VR/AR头显初创公司Vrvana,并将团队的9名工程师及其家人带到美国加利福尼亚州。Vrvana的创始人伯特兰·内普韦(Bertrand Nepveu)在接受采访时表示,他预计苹果进入虚拟现实领域将引发一场革命,就像Macintosh电脑一样改变了一切。Vrvana在2017年已经开发出支持混合现实的VR头显Totem,并且团队还开发了一种能够进行实时图像处理的专门芯片。Vrvana获得了CES 2017大会的最佳硬件产品奖,并引起了苹果等科技巨头的关注。内普韦认为,苹果进入虚拟现实领域将推动3A游戏工作室如育碧等为VR开发3A游戏,进而推动元宇宙的发展。他相信,十年后每个人都会有一台头显设备,这将成为个人的延伸,就像现在的智能手机一样。
前苹果VR项目员工:苹果发VR时将是PC时代Macintosh时刻

索尼发布官方PlayStation VR2拆机视频讲解

索尼官方在PSVR 2发售前提供了头显和控制器的拆机视频,这些视频包含中文字幕。然而,直接点击文章下方的视频无法看到字幕,需要点击视频界面右上方的“去bilibili”观看。PSVR 2是为PlayStation 5开发的VR头显,将于2023年2月22日全球同步发售,中国大陆市场建议零售价为4499元。用户可以通过官方页面、天猫、京东、抖音、索尼中国等线上和线下PlayStation官方授权渠道购买。同时,索尼中国还特别为中国玩家准备了一份惊喜,由奥嘉科技开发和GAMEPOCH星游纪发行的节奏音游《牧场星球》将成为首款国行PlayStation VR2游戏,2月23日起在PlayStation国行商城限时免费畅玩。
索尼发布官方PlayStation VR2拆机视频讲解