Nweon

nweon 文章

Meta专利AR/VR音频内放、外放播放生成空间音频和消除串扰的方法

Meta在一项名为“通过高频眼镜播放和低频外部播放生成空间音频和消除串扰”的专利申请中介绍了一种生成空间音频和消除串扰的方法。该专利描述了一个空间音频扩展系统,可以利用外部扬声器灵活地扩展可穿戴音频设备提供的空间音频,以进行精确的低频空间音频播放。 该空间音频扩展系统利用与头相关传递函数和/或耳间时差为用户生成空间音频,并为低频音频部分生成串扰抵消滤波器。系统根据用户的听觉特征和耳间时差模型确定空间音频和串扰抵消滤波器。空间音频扩展系统可以实时更新串扰抵消滤波器以适应用户头部尺寸的变化。 通过利用外部音频设备提供低频音频回放,空间音频扩展系统提供了更精确的空间线索,并且比传统系统更灵活。此外,系统可以利用音频时间延迟实现空间音频组件的时间对齐。 这项专利申请最初于2022年1月提交,并已在美国专利商标局公布。
Meta专利AR/VR音频内放、外放播放生成空间音频和消除串扰的方法

Something Random发布火车模拟器《Toy Trains VR》,计划登陆PICO Store等

游戏开发商Something Random最近发布了一款名为《Toy Trains VR》的火车模拟器,并表示将登陆PICO和其他主要的头显平台。《Toy Trains VR》是一款有趣的轨道建造模拟器,玩家可以以现代的方式重新体验童年乐趣。游戏中,玩家将被传送到一个包含复古玩具和宝藏的世界,然后按照自己的创意构建独特的火车轨道,创造出一首充满创造力和探索的交响曲。《Toy Trains VR》的主要亮点包括尝试不同的选择来解决开放式的挑战,用个人风格装饰空间,与世界本身进行互动,如泼水、移动树木或玩弄可爱的小火车,回到过去体验童年乐趣以及在玩具火车乐园里放松自己。虽然《Toy Trains VR》将登陆PICO和其他主要的头显平台,但具体的上市时间还未公布。
Something Random发布火车模拟器《Toy Trains VR》,计划登陆PICO Store等

传苹果Vision Pro具有 1TB 以上存储空间

苹果的空间计算机需要多大的存储空间呢?根据开发者的亲身体验,数字可能要大于大多数的iPhone。根据iphoneonesoft的说法,存储容量可以在VisionOS的设置应用中查看,而苹果Vision Pro具有1TB的本地存储空间。鉴于一般XR头显的性质及Vision Pro的配置,苹果为这款设备提供大量的机载空间并不奇怪。例如,苹果可以以“起价”出售256GB的版本,并以更高的溢价提供512GB和1TB的版本。苹果的M2芯片目前与MacBook Air系列的最高2TB存储空间配套使用。尽管单一配置的Vision Pro可能是销售这款产品的最简单方式,但不难想象苹果以更高的价格选项来销售设备。苹果已经证实,这款售价3500美元的头显将采用M2芯片,电池续航时间长达2小时,但其他规格目前没有最终确定。Vision Pro将于2024年年初率先在美国发售,并陆续登陆其他国家和地区。
传苹果Vision Pro具有 1TB 以上存储空间

微软宣布Azure Kinect技术产品线授权转移给奥比中光继续发展

微软宣布停止生产Azure Kinect Developer Kit深度传感器设备,但强调技术仍将保持开放,并通过合作伙伴提供给社区。微软的合作伙伴奥比中光发布了一款搭载微软间接飞行时间深度传感技术的传感器产品。现有用户可以继续使用Azure Kinect Developer Kit,而SDK也将继续提供下载。此外,可以在10月底前购买设备并提供有限硬件保修。微软建议寻找长期解决方案或需要定制硬件的用户考虑合作伙伴提供的产品。微软认为与生态系统中的领导者合作并授权他们提供端到端解决方案是最佳选择。微软已将像素和传感器技术授权给Analog Devices,其已使用微软技术构建了自己的深度传感器和摄像头模块。他们还与SICK AG合作开发深度摄像头。奥比中光也发布了与微软合作开发的传感器产品。微软相信通过这些合作伙伴关系,社区将获得各种基于微软深度传感技术的传感器和摄像头系统。微软感谢用户多年来的支持和反馈,认为与开发者社区的共同成就令人惊叹。
微软宣布Azure Kinect技术产品线授权转移给奥比中光继续发展

奥比中光发布Azure Kinect技术iToF深度摄像头Femto系列

3D视觉系统开发商奥比中光发布了即将与微软合作开发的传感器产品Femto Bolt、Femto Mega和Femto Mega I。这些产品基于HoloLens 2搭载的间接飞行时间深度传感技术,并采用了与Azure Kinect Developer Kit相同的深度摄像头模块。该团队表示,这些传感器将微软的间接飞行时间深度传感技术与奥比中光在高精度深度摄像头领域的设计和制造能力相结合,扩大高性能3D视觉在物流、制造、零售、医疗保健和健身行业的应用。Femto系列产品包括Femto Bolt、Femto Mega和Femto Mega I,分别具有不同的性能和应用场景。奥比中光表示,采用微软间接飞行时间深度传感技术的产品使用了与Azure Kinect Developer Kit相同的深度摄像头模块和相同的操作模式和性能,开发者可以将现有的应用程序迁移到奥比中光设备上。微软表示,与奥比中光的合作将为市场带来更多的传感器选择,满足广泛的使用场景,丰富了3D传感技术的应用。
奥比中光发布Azure Kinect技术iToF深度摄像头Femto系列

Disvovery VR探险纪录片《跟着德爷闯东非》即将登陆PICO Store

PICO与Discovery联合制作的VR交互式探险纪录片《跟着德爷闯东非》发布了首支预告片。团队表示该作品即将登陆PICO一体机,但具体时间尚未公布。该纪录片讲述了野外求生专家德爷在东非的冒险故事。德爷是一名前英国陆军上尉,在2008年钻进秘鲁热带雨林,并用860天完成了全程,成为第一个走完亚马逊河全程的人。他在2013年独自生活了60天,成为一个荒无人烟小岛上的“现代鲁宾逊”。这部交互式探险纪录片将提供3D视效、360度全景视野和8K清晰画面,观众可以与德爷一起体验东非的自然风情,面对生存挑战并感受惊险与热情。团队表示,《跟着德爷闯东非》即将登陆PICO一体机,但具体时间未定,PICO用户请期待。
Disvovery VR探险纪录片《跟着德爷闯东非》即将登陆PICO Store

微软AR/VR专利提出利用AI自动将2D PPT变成3D PPT

微软提出了一种利用人工智能(AI)将2D幻灯片转换为3D幻灯片的方法,以自动创建混合会议中的三维演示。该方法利用网络系统接收指示并访问2D幻灯片演示文稿和映射数据库,然后使用多个映射将2D幻灯片的元素从2D格式转换为3D格式。通过将转换的元素与图像捕获设备捕获的背景和/或真实世界图像数据混合,从而生成3D全息表示。AI引擎负责执行转换操作,并基于映射数据库中的映射定义转换规则。同时,积分服务负责将混合的3D演示提供给演示者设备和查看者设备。演示者可以在2D演示设备上预览和编辑3D演示,而在3D查看器设备上观看3D演示。该方法为演示者提供了一个无需单独制作3D演示的方式,使得演示者能够在混合现实环境中进行演示,并与观众进行实时协作。该技术可以在混合会议中提升演示的交互性和视觉效果。该方法已申请专利,并在2023年8月17日被映维网公开报道。
微软AR/VR专利提出利用AI自动将2D PPT变成3D PPT

高通专利为3D场景探索光线追踪处理器

高通近日公布了名为“光线追踪处理器”的专利申请,其中介绍了一种用于增强光线追踪处理器操作的发明。光线追踪是一种计算机图形技术,通过模拟光线在三维场景中的路径和与光源照射对象的交互,以生成逼真的图像。高通认为光线追踪是一项计算密集型技术,为了提高实时光线追踪的性能,需要实现可扩展和有效的解决方案。该发明的目的是通过优化光线追踪的计算和处理方式,提高光线追踪处理器的性能。例如,通过减少每个光线追踪操作的计算时间,可以增加每帧投射到场景中的光线数量,从而提高图像质量。此外,高通还提出了利用基于树的加速结构来提高光线相交测试的效率的加速技术。加速数据结构可以根据世界空间或对象空间来定义,从而优化光线与场景中的对象相交的计算过程。这项专利申请也提到了AR/VR用例,意味着该发明可能应用于增强现实和虚拟现实领域。
高通专利为3D场景探索光线追踪处理器

Meta为AR/VR云渲染提出通过渐进下采样帧视频压缩渐进传输图像数据

为了在计算能力有限的移动设备上提供高保真度的XR体验,图像渲染的计算密集型操作可以转移到云生态系统中。在云生态系统中,计算成本高昂的计算由高性能服务器执行,将处理后的图像压缩并流式传输到移动设备。然后,移动设备可以进行任何所需的最后调整并显示图像内容。然而,云渲染成功的主要挑战之一是引入额外的延迟。为了解决这个问题,Meta提出了一种名为“渐进下采样帧视频压缩传输详细图像数据”的方法。该方法利用视频压缩技术将原始输入图像进行渐进下采样,生成多个子帧。这些子帧可以在云端编码和传输到客户端设备,然后通过上采样和合并以逐步提升图像的质量。这种渐进下采样传输的方法允许在客户端设备上快速使用低分辨率纹理图谱,从而实现低延迟和高质量的图像显示或使用。该方法还可以利用视频编码器对子帧进行编码,优化压缩能力,并减少所需的处理资源和网络带宽。
Meta为AR/VR云渲染提出通过渐进下采样帧视频压缩渐进传输图像数据

德国程序员为《孤岛惊魂》开发VR Mod,支持6DoF自由运动控制

"Nweon, August 17, 2023 - With the first addition of motion control support in "Far Cry VR v0.5", you can now truly immerse yourself in the first-person perspective of the classic 2004 shooting game "Far Cry" in VR. Released on March 23, 2004, "Far Cry" is a first-person action shooting game developed by Crytek and published by Ubisoft. It was released in the same year as "Half-Life 2" and "Doom 3". The game's protagonist, Jack Carver, is a former special forces member who operates a rental speedboat business in the South Pacific islands after retirement. One day, he escorts a female journalist to a mysterious island in Micronesia, but their boat is bombed by mercenaries, and the journalist goes missing. Jack Carver must find the journalist and get her off the island. As the chief developer of the "Half-Life 2" VR Mod, German programmer Holger Frydrych has been working on developing a third-party VR Mod for "Far Cry" to allow fans to play this classic VR game. Now, he has finally added full motion control support to the newly released 0.5 version. This means you can naturally grip guns and knives with your hands or stabilize them with both hands. In addition, "Far Cry VR v0.5" supports six degrees of freedom and room-scale VR, so you can sneak up on enemies and enjoy the freedom of movement. If you miss the old days of "Far Cry" and shooting games, and you have a PC VR headset or a VR headset compatible with a PC, now might be the time. "Far Cry VR v0.5" is available for free download, but the original game "Far Cry" is required. For the official page of the "Far Cry VR" project, please visit here, and for downloading the VR Mod, please visit here. Additionally, you can purchase "Far Cry" on Steam or GOG.com for 48 RMB."
德国程序员为《孤岛惊魂》开发VR Mod,支持6DoF自由运动控制