影创MR眼镜5G教育应用再获三项大奖

8月9日,影创科技的"5G+MR全息教室"项目在第二届"绽放杯"5G应用征集大赛中获得了"最佳表现奖"和"最佳技术创新奖"等三个奖项。该比赛由南昌市和江西省通信管理局指导,由南昌市红谷滩新区管委会等机构主办。影创科技的项目是5G云化虚拟现实教育的典型场景,拥有三大功能,可以开启一种全新的教学模式,给教育领域带来颠覆性变革。该项目主要通过接入高速率、低时延的5G网络,并引入边缘计算和切片网络来实现云端渲染,为教学提供优质的显示画质和更低的渲染时延。在影创科技的支持下,首个5G+MR教室已在上海徐汇中学落成,并成功与远在云南的红河州云阳中学实现了异地双向同步教学。近200所院校将陆续建成5G+MR教室,帮助异地师生更好地交流、探索和学习,推动教育公平化进程。
影创MR眼镜5G教育应用再获三项大奖

韩国科学技术院为VR研究基于人工智能的隐形键盘

韩国科学技术院的研究人员近日开发出了一种基于人工智能的隐形键盘界面。该键盘能自动定位根据用户开始键入文本时双手的摆放位置。虽然触控屏和虚拟键盘是移动用户主要的输入方式,但它们并没有完全取代全尺寸的QWERTY键盘。目前社区已经提出了多种解决方案,但它们的精度和速度都还不理想。 因此,韩国科学技术院的研究人员决定重新构思输入概念,他们开发了一种完全想象式的键盘界面。该界面名为I-Keyboard,没有预定义的按键布局、形状或大小,用户可以以任何角度和位置进行文本键入,无需担心键盘的位置和形状。该键盘采用深度学习来识别用户要键入的内容,不需要校准步骤。此外,该键盘不仅可以适应手部漂移和触摸变化,还可以动态地将触摸点转换为单词。 然而,该技术仍然有待改进,目前的精确度达到95.8%,每分钟字数只有约45个。研究人员指出,当该键盘与先进的触摸检测方法集成时,例如用于VR系统时,将会有更多的应用前景。
韩国科学技术院为VR研究基于人工智能的隐形键盘

芝加哥大学探索用电子肌肉刺激给VR带来更真实自然的交互体验

芝加哥大学助理教授Pedro Lopes对使用电子肌肉刺激设备时的代理感非常感兴趣。他进行了一系列实验,旨在探究能否测量、控制和恢复代理感。他的研究团队设计了实验,在某个时间窗口内提供EMS刺激,这样被试很难区分本人行为和EMS生成行为。一项实验中,被试在触摸虚拟盒子之前就接受了反馈,他们的大脑活动出现了显著变化,虚拟现实体验变得不那么逼真。Lopes与其他神经科学家合作,通过EMS和fMRI搜索区分自生行为和外生行为的大脑区域。他们发现在一个后岛叶皮质的区域,在自生运动期间对触摸作出强烈反应,但在EMS刺激期间则不然。这项研究可以指导工程师设计下一代EMS设备,并监控用户的大脑活动来调整虚拟现实体验的真实性。此外,保持用户的代理感可以提高身体动作的训练。
芝加哥大学探索用电子肌肉刺激给VR带来更真实自然的交互体验

研发实战:Moziila分享混合现实编辑器MrEd的开发经验和教训

Mozilla最近发布了一个实验性混合现实编辑器MrEd,旨在探索MR故事在线编辑的可能性。在开发过程中,团队面临了一些挑战。首先,他们发现Glitch是一个很好的平台选择,它支持匿名使用,对学生友好,并且适合托管模型和360度图像。然而,Glitch有一些缺点,例如缺乏文档介绍和隐藏编辑器的困难。为了解决这些问题,他们创建了两个git仓库,一个用于编辑器的代码,一个用于默认文档和行为,以便在更新编辑器时不影响用户创建的资产和文档。此外,他们还创建了一个简单的文档服务器来扫描文档和脚本目录,并生成用于编辑器的JSON API。另一个挑战是用户认证,他们通过密码文件实现了密码验证的功能。最后,他们希望在未来为Glitch添加更多功能。总的来说,他们成功地修改了Glitch以满足他们的需求,并为开发者提供了一些解决方案和经验教训。
研发实战:Moziila分享混合现实编辑器MrEd的开发经验和教训

Oculus Quest、Go开始支持GPU性能分析工具Unity GPU Profiler

Unity GPU Profiler是一个旨在帮助开发者优化应用程序GPU性能的工具。现在,由于Oculus与高通和Unity的合作,Oculus Quest和Oculus Go已经支持启用Unity GPU Profiler功能。此功能将支持自2017 4 30f1 / 2018 4 2f1 / 2019 1 7f1 / 2019 2 0b5 / 2019 3 0a5以后的所有Unity版本。 在使用这个工具时,建议首先访问概述页面,了解相关信息。文章简要介绍了如何利用这个工具的一些技巧。 其中,作者提到了几个小技巧。首先是精度,由于分析开销,绘制调用时间的绝对值高于实际值。建议使用相对值进行比较,而不是过多关注绝对数字。其次是噪点,有时会在分析结果中看到一定的噪点,主要是由于VrRuntime GPU优先权所致。建议采集数个样本并选择较小的样本,可以避免绘制调用和TimeWarp之间的冲突。另外,移动设备支持针对续航优化的动态时钟,不同时钟级别下的GPU性能差异会影响性能分析结果。最后,由于图形驱动程序问题,Gear VR暂时无法利用该功能。 总之,Unity GPU Profiler可以帮助开发者更有效地优化应用程序的GPU性能,提供更优秀的VR游戏/应用。
Oculus Quest、Go开始支持GPU性能分析工具Unity GPU Profiler

索尼新专利为VR 6DoF控制器提出『电磁定位追踪』解决方案

电磁追踪是头显系统实现对象定位的重要解决方案,Facebook、微软和索尼都在研究该技术。索尼已经申请了多项与电磁追踪相关的专利发明,其中包括了一份采用了电磁追踪的VR手套专利。最近,索尼又申请了一份与电磁定位系统相关的专利申请。这份专利描述了一个系统,包括一个计算组件执行交互式应用程序,并生成和发送图像帧,一个头显接收并呈现图像帧,以及一个发射磁信号的磁发射器。系统还包括一个控制器,用于检测磁信号并处理其同步编码,以确定控制器的位置和方向。控制器会将位置和方向信息发送到计算组件,计算组件会使用这些信息来更新应用程序的状态。这项技术的专利申请名为“Head-Mounted Display To Controller Clock Synchronization Over Em Field”,最早于2018年2月提交,并近期由美国专利商标局公布。
索尼新专利为VR 6DoF控制器提出『电磁定位追踪』解决方案

专利显示Oculus用专用组件取代部分GPU功能,以降低MTP动显延迟

虚拟现实(VR)行业中的传统头显存在一些缺陷,可能对用户体验产生负面影响。其中一个主要问题是动显延迟,即头显显示的画面滞后于用户的实际运动,可能导致晕动症。为减少动显延迟,Oculus在一份最新的专利申请中描述了一种用于减少动显延迟的专用组件。这些组件包括图像信号处理器、用于接收摄像头拍摄的图像帧的硬件组件、混合组件将计算机生成的图像与图像帧叠加,以生成混合现实帧。专用组件还包括硬件加速型图像校正组件,为混合现实帧执行图像校正过程。通过将这些操作交由专用组件执行,可以减少动显延迟。其他方式包括直接发送图像帧至处理组件和通过硬件加速型显示成像管道与显示组件同步。需要注意的是,这只是一份专利申请,尚不确定具体效果以及是否会商业化。
专利显示Oculus用专用组件取代部分GPU功能,以降低MTP动显延迟

Oculus Rift 每周新内容

笑话:一个儿子对爸爸说,他希望有一天自己疲惫地回家,然后爸爸给他打电话告诉他家里有百亿家产,因为之前爸爸一直装穷是为了锻炼他。然而,爸爸回答说他还在等他爷爷的电话。 这篇文章介绍了几款在Oculus Rift平台上发布的最新VR游戏。首先是《DiRT Rally 2.0》,玩家可以在这个游戏中驾驶赛车在各个具有标志性的赛道上比赛。然后是《Ninja Legends》,玩家将扮演忍者战士,使用武器和暗影技能挑战各种关卡。接下来是《Touring Karts》,这是一款适合喜欢卡丁车的人的游戏,提供了22个赛道和30种定制赛车。还有《Sports Scramble》,这是一款将不同体育运动混合在一起的游戏,玩家可以使用不同的球杆和棍子来进行比赛。此外,《PrettySafe Airlines》是一款模拟飞行游戏,玩家扮演一位空运公司的驾驶员,将货物安全送到目的地。最后,《Stranded》是一款沉浸式体验游戏,玩家被搁浅在一个无人荒岛上,必须探索环境生存下去。另外,《Meu》是一款具身化艺术表达工具,玩家可以定制虚拟化身来表达自己的思考。最后,《Song Beater: Quite My Tempo!》是一款音乐节奏游戏,玩家可以使用不同的武器击砍音符。
Oculus Rift 每周新内容

Oculus Go 每周新内容

映维网报道了几款XR游戏的信息。其中包括以下几款游戏: 1.《TRIPP》是一款免费的健身系统,使用Oculus Go设备,通过科学研究的训练来减压和提高专注力。 2.《Frog & Froggie》是一款售价4.99美元的平台游戏,适用于Gear VR和Oculus Go设备,在游戏中需要引导青蛙英雄拯救青蛙女孩,面对无数挑战和危险。 3.《SGN SportsCard Baseball》是一款售价0.99美元的棒球模拟器,适用于Oculus Go设备,可以与AI进行激烈的棒球比赛。 4.《PrettySafe Airlines》是一款售价3.99美元的模拟器,适用于Gear VR和Oculus Go设备,在游戏中扮演一位新人驾驶员,掌握操作复杂系统并安全地送货。
Oculus Go 每周新内容