Insider Insider

Nweon

nweon 文章

下一个十年,看影创科技如何开启元宇宙时代

在Facebook Connect 2021大会上,马克·扎克伯格宣布Facebook公司正式改名为Meta,并展示了多个元宇宙场景,表达了Meta拥抱元宇宙的决心。会议上,扎克伯格提到了一款名为“Project Cambria”的短焦VR一体机,预计将于2022年推出。这款设备采用了Pancake光学方案,并具备彩色的透视功能,将VR设备从娱乐工具转变为生产力工具,应用场景扩展至办公、会议等领域。这一方案与影创早前的预测相吻合,影创多年来致力于光学和算法等底层技术的研究,并将这些技术开放授权给众多合作伙伴。随着VR与AR的融合,VR设备将成为生活、工作中不可或缺的一部分。其他技术和算法如佩戴方式、彩色See through功能、手柄自追踪、自然手势识别、虚拟键盘、多任务3D屏幕和体积视频等也得到了展示。综合来讲,Meta通过Tesseract OS集成了以上自研算法与技术,实现了高性能、低延迟和丰富功能的操作系统,将VR成为新的生产力工具。趣立科技作为影创集团的平台,提供VR/AR全栈产品级算法与系统的解决方案,推动VR产业进入元宇宙时代。
下一个十年,看影创科技如何开启元宇宙时代

估值超5亿美元,三星和三七互娱参投波导厂商DigiLens D轮融资

全息波导厂商DigiLens宣布完成D轮融资的第一阶段,三星电子领投,其他投资者包括Samsung Electro-Mechanics Diamond Edge Ventures、三菱化学、Alsop Louie Partners、三七互娱、UDC Ventures Universal Display和Dolby Family Ventures等。D轮融资的第二阶段将在2021年底完成,允许其他战略投资者加入。虽然未公布具体金额,但DigiLens表示公司估值超过5亿美元。DigiLens CEO克里斯·皮克特表示,这轮融资将帮助他们在核心光学技术的竞争中处于领先地位,该技术对于部署AR和XR设备至关重要。DigiLens近期还与三菱化学合作推出高性能低成本塑料波导,以及发布透明分辨率扩展器将投影仪分辨率提高一倍。三星电子表示他们专注于开发创新技术,并为全球客户提供差异化和竞争力的AR设备,对与DigiLens合作表示欣喜。
估值超5亿美元,三星和三七互娱参投波导厂商DigiLens D轮融资

小派与iRacing等内容开发商合作,发力布局内容生态

在Pimax Frontier发布会上,Pimax宣布了在内容生态方面的布局。他们将成立Pimax Studio与开发者合作,推动VR 3.0的愿景成为现实,并推出一系列资金、技术、本地化、市场推广和商店界面运营等支持政策。该计划称为先行者计划,适用于在2022年3月底前确定上线Pimax Store的VR内容。为了迎接VR 3.0时代,Pimax已经推出了硬件标准,并认为内容需要从一开始与硬件适配。他们希望在生产的早期阶段就将内容和技术紧密结合,以实现硬件的最大潜力并展示内容开发人员的愿景。另一方面,搭建Pimax内容生态能够使VR内容与Pimax头显在SDK适配后有更好的显示效果,并为Pimax的Omni AIO全能机构建丰富的一体机内容库。此外,Pimax与iRacing建立了深度合作关系,并吸引了一批用户赞不绝口的VR内容在Pimax Store上线。未来,Pimax Store将上线种类丰富的VR内容,开发者可以通过电子邮件与Pimax团队联系。
小派与iRacing等内容开发商合作,发力布局内容生态

奖金高达70万美金,Meta将于11月9日举办一场XR黑客松

Facebook宣布将于2021年11月9日至22日举办一场名为XR黑客松的活动,前身为映维网。活动提供高达70万美元的现金奖金。参赛者需要组成团队并在Spark AR和Presence Platform两个产品挑战领域中自由选择。参赛作品将根据创意独创性、对产品类别的战略影响可能性以及整体实施情况等方面进行评判。参赛者需提交一个两分钟的视频和应用工作的屏幕投影,对于Presence Platform赛道还需要提供GitHub链接、自述文件以及下载和测试APK的说明。活动设有一等奖5.5万美元,二等奖4万美元,三等奖2.5万美元和鼓励奖1万美元。根据规则,参赛作品不能从Meta直接或间接获得财务支持的软件中派生。参赛者将保留其作品及其内容的所有权,但授权Meta发布软件用于管理黑客松和内部研究开发目的,但不包括任何营销或促销目的的软件。
奖金高达70万美金,Meta将于11月9日举办一场XR黑客松

基于3D视频重建虚实场景交互,Meta提出3D mask volume

视图合成技术的最新进展显示了在创建沉浸式虚拟体验方面取得了出色的结果。然而,要实现与虚拟场景的真实交互,我们需要结合时间信息的能力。Facebook和加利福尼亚大学的研究人员在一篇名为《Deep 3D Mask Volume for View Synthesis of Dynamic Scenes》的论文中,研究了一种特定设置,其中输入视频来自静态的双目摄像头,并且通过预测推断出大部分新视图。研究人员利用一个3D mask volume解决了由于遮挡区域造成的时间不一致性问题,该volume允许在三维空间中操作。为了训练网络,研究人员使用了RealEstate10K数据集和自己构建的多视图视频数据集。实验证明,该方法可以在仅使用两个输入视图的情况下生成时间稳定的结果。然而,该方法存在一些限制,例如摄像头需要保持静止,并且对静态背景的估计可能不可靠。团队希望在进一步研究中扩大数据集并考虑动态摄像头运动。该研究对于立体输入视频动态场景的视图合成是一个重要的进展。
基于3D视频重建虚实场景交互,Meta提出3D mask volume

Facebook研究为空间音频进行更好的信号增强

近年来,使用空间处理算法从噪点环境中提取清晰语音的能力备受追捧。这种能力在自动语音识别、助听器信号增强、在线语音聊天、视频会议等应用中非常常见。业内普遍认为,跨数据方法是降低信号噪点的稳健解决方案。在空间信号增强领域,研究人员已经研究了波束形成器算法和超定向算法等。另外还有一些更优化的方法,例如最小方差无失真响应(MVDR)和线性约束最小方差(LCMV)等方法,可以提供最佳滤波器系数,同时不使所需信号失真。然而,信号估计参数仍然具有挑战性。团队提出了一种名称为Meta的空间信号增强方法,该方法利用空间域处理技术进行自适应参数估计,不依赖于期望和非期望源信号的频谱和时间统计。实验结果表明,该方法能够在不到两秒钟的时间内产生优于最大方向性波束形成器的阵列增益,对于多种应用场景具有广泛的适应性。
Facebook研究为空间音频进行更好的信号增强

多款AR手游相继关服,超级爆款《Pokémon Go》无法复制吗

Niantic, the developer of augmented reality (AR) mobile games, recently announced the shutdown of "Harry Potter: Wizards Unite" after the release of "Catan: World Explorers" in September. Apart from the hugely successful "Pokémon Go," most AR games have had disappointing results, including "Minecraft Earth," "Jurassic World Alive," "The Walking Dead: Our World," and Tencent's "Let's Hunt Monsters." The main reason for the failure of these games is that developers aimed too high, trying to replicate the unexpected success of "Pokémon Go." The article suggests that smaller AR experiences like Nintendo's "Pikmin Bloom," which aims to encourage outdoor walking, may have a better prospect. Other AR games, such as Microsoft's "Minecraft Earth" and CD Projekt's "The Witcher: Monster Slayer," have also performed poorly. The article concludes that the success of "Pokémon Go" was a one-off, and most AR games have limited potential. However, smaller, supplementary AR experiences like "Pikmin Bloom" can integrate well into our lives.
多款AR手游相继关服,超级爆款《Pokémon Go》无法复制吗

微软发布Mesh for Teams,提升远程协作、混合办公体验,开启MR全息办公

微软日前在Ignite大会上发布了一个将于2022年开始推出的XR解决方案:Mesh for Microsoft Teams。这个解决方案将Microsoft Mesh的混合现实功能与Microsoft Teams的生产工具相结合,从而实现远程协作和混合会议的协作性和沉浸感。用户可以通过标准智能手机、笔记本电脑和混合现实头显访问该解决方案,并可以加入虚拟会议、发送聊天、协作共享文档等。微软表示,Mesh for Teams将增强凝聚力和确定共同目标,用户可以在沉浸式空间中创建自己的虚拟化身,通过多种方式交流和协作。该解决方案旨在突破人们在在线会议中使用摄像头的限制,通过虚拟化身和沉浸式空间创造更好的在场感和参与感。Mesh for Teams预计将在2022年上半年开始提供预览版。微软的愿景是将人们从孤独的体验转移到包含内容叠加的现实世界情景中,打造一个精心调整的协作环境,向全球用户展示远程办公和混合办公的新方法。
微软发布Mesh for Teams,提升远程协作、混合办公体验,开启MR全息办公

Quest v34开始推送,增加空间感知能力,实时监测外部障碍物

Oculus Quest v34固件已发布,主要优化了防护系统和语音命令,并允许安卓用户在VR中查看手机通知。新版本的语音命令可以用于媒体控制、显示Move统计信息、打开设置选项卡和回答简单问题。安卓用户现在可以通过Oculus app设置手机通知,并在VR中接收手机锁屏显示的通知。团队还更新了VR手机通知,使其显示通知应用的图标。此外,团队还改善了空间感知功能,使用户能够感知周围物体和人的进入。版本还开放了Passthrough API,允许开发者创建混合现实体验,并将与大家见面。Horizon Home引入了一个全新的个人办公环境,用户可以在VR中使用2D应用进行多任务处理。团队还调整了电池参数以延长头显的待机时间,并为Air Link启用了安全配对以提升安全性和体验。其他修复包括解决下载游戏或应用时进度条显示错误信息的问题。
Quest v34开始推送,增加空间感知能力,实时监测外部障碍物

AR手游《哈利波特:巫师联盟》将于2022年1月31日正式关服

虚拟现实游戏开发商Niantic宣布将于2022年1月31日关闭其AR手游《哈利波特:巫师联盟》。届时,游戏的功能和服务器将全部关闭,游戏也将从苹果App Store、Google Play和三星Galaxy Store下架。Niantic表示,除非法律另有要求,否则无法退还过去购买的费用。玩家可以在2022年1月31日之前使用剩余的金币和物品。《哈利波特:巫师联盟》于2019年6月发布,以JK罗琳的原创故事为基础,打造了一个魔法世界的手游。根据行业追踪公司Sensor Tower的数据,该游戏的下载量超过2000万次,累计收入约为3940万美元。然而,与Niantic旗下的《Pokémon Go》在2021年实现的11亿美元相比,该游戏的收入非常有限。另外,Niantic与任天堂合作开发的AR游戏《Pikmin Bloom》已于10月底正式登陆澳大利亚和新加坡的苹果App Store和谷歌Play Store。该游戏基于任天堂的《皮克敏》,旨在鼓励玩家多出门,欣赏周围的社区和自然景观。
AR手游《哈利波特:巫师联盟》将于2022年1月31日正式关服