Insider Insider

Nweon

nweon 文章

3月13日公开课预告:详解Pico XR SDK与眼动追踪在 XR 上的应用开发

Qualcomm XR Innovation Application Challenge (Qualcomm XR创新应用挑战赛) has launched its second edition on February 14. As part of the competition, a series of online and offline public courses will be held. The second online course of the competition will take place on March 13. The course will be hosted by Pico SDK Software Manager Shang Aili and Tobii Senior Project Manager Liang Zhijie. The theme of the course is "In-depth Analysis of Pico XR SDK and Eye Tracking in XR Application Development." In the course, Shang Aili and Liang Zhijie will share content on "Pico XR SDK (Unity & UE4) Development Guide" and "The Value and Tools of Eye Tracking in XR Application Development," respectively. The competition supports development using Unity or Unreal. The course is open for registration and is suitable for Pico XR Unity/Unreal developers, cloud computing/big data developers, XR application developers, XR product managers, XR content creators, students, and anyone else interested in the topic. The course aims to help developers quickly familiarize themselves with the usage and adaptation of Pico Unity SDK and Pico UE4 SDK, reducing the learning costs of using, developing, and migrating SDKs, and improving business efficiency. Furthermore, eye tracking technology, as one of the core technologies in the XR field, is increasingly integrated into XR hardware devices such as Pico Neo 2 Eye and Qualcomm Snapdragon XR2 reference design. Eye tracking technology has great value in optimizing XR hardware resources, enhancing user immersion, and providing data insights. In the course, Liang Zhijie will introduce the core value, latest technology and tools, and application cases of eye tracking in XR application development. He will also provide a comprehensive introduction to the basics and core value of eye tracking, and discuss the development environment, eye tracking application design, and eye tracking resources, enabling developers to have a deeper understanding of eye tracking development technology and practical methods for application.

索尼“捉鬼敢死队”分享:如何用AR重塑线下娱乐体验

索尼设计与技术团队和索尼影业合作开发了交互式AR体验《Ghostbusters Rookie Training》。该项目利用增强现实技术,让玩家如同电影主角一样穿上捉鬼敢死队制服与幽灵战斗。项目的起源可以追溯到索尼研发中心的AR眼镜原型。设计团队经过评估后选择了《捉鬼敢死队》作为合适的IP,因为它非常适合AR技术,并获得了索尼影业的批准。团队为该项目制定了多个目标,包括将平常与非常融合到娱乐体验中,令玩家沉浸在电影氛围中,并实现仿如现实般的感觉。在开发过程中,团队重视视觉与听觉的融合,使用游戏元素和符合电影背景的音效来增强体验的真实感。团队还利用AR眼镜的联网功能使项目达到高水准。测试体验中,开发者看到玩家们相互交谈、捕捉幽灵并庆祝成功,感到非常满意。索尼影业导演伊万·雷特曼也对该体验给予了赞赏。团队在公众面前举办了体验活动,获得了大量反馈建议,希望将其转化为更好的娱乐体验。
索尼“捉鬼敢死队”分享:如何用AR重塑线下娱乐体验

2020年03月06日美国专利局新申请AR/VR专利报告

美国专利及商标局近期公布了一批全新的AR/VR专利。其中包括了 Facebook、Oculus、Magic Leap、Apple、Google、Qualcomm、Sony、Intel 等公司的专利。这些专利涉及了多个关于 AR/VR 技术的方面,涵盖了深度感测、光纤扫描系统、光场处理器系统、透视式计算机显示系统、电磁追踪、动态调光、用户界面安全等。这些专利的创新内容有助于推动 AR/VR 技术的进一步发展,并为XR行业带来更多创新应用和可能性。
2020年03月06日美国专利局新申请AR/VR专利报告

Facebook计划构建自家 SideQuest平台

SideQuest是一款在VR社区中相当流行的应用程序,它允许Oculus Quest用户在未通过Facebook商店发行规范的应用程序。Facebook曾经拒绝许多优秀的游戏进入Quest Store,并且通常没有给出解释或告知开发工作室需要解决的问题。然而,现在情况似乎有所改变,Oculus内容生态系统总监克里斯·普鲁厄特在Twitter上暗示未来可能会提供一种官方的SideQuest类应用商店。值得一提的是,《VRigade》的SideQuest下载量已经达到72000次,但Oculus最近第二次拒绝了在Quest Store发布《VRigade》的请求。Facebook表示他们正在积极考虑帮助开发者将游戏带给Quest用户,这可能暗示着公司正在考虑提供一个官方的SideQuest类应用商店,为尚未获批进入Quest商店的开发者提供额外的营收渠道。这种非正式的发行方式可以让有兴趣的玩家为开发者提供营收和游戏测试反馈,从而帮助游戏满足Quest Store的发行标准。
Facebook计划构建自家 SideQuest平台

创企利用VR环境训练AI机器人清洁工搞卫生

纽约初创公司SOMATIC正在利用虚拟现实技术训练AI机器人清洁公共卫生间。该公司的机器人配备了TP传感器,能够在公共卫生间中自由移动,并通过虚拟现实技术学习喷涂、擦拭、吸尘和吹干等操作。经过专业的VR训练,该机器人一天可清洁约8个小时,并能够开门和乘坐电梯。SOMATIC的主要目标是机场、赌场、办公室等公共卫生间密集的场所。在试用期结束后,机器人的月租费用为1000美元。SOMATIC已经获得了一批用户,并正在吸引更多的客户。这种机器人不仅在清洁方面提供帮助,而且成本更低效益。在美国,相关员工每月薪酬支出在4000至10000美元之间,而SOMATIC机器人的费用仅为每月1000美元。
创企利用VR环境训练AI机器人清洁工搞卫生

Qualcomm XR大赛分享:高度还原分油机拆卸完整过程

在第一届Qualcomm XR大赛中,来自露电科技的团队开发了一款名为《分油机的拆卸》的作品,并获得了应用组银奖。该作品利用LeapMotion手部跟踪技术,通过UI和语音引导,循序渐进地教学生如何正确拆卸分油机,实现赋能性教学。团队在参赛过程中遇到了挑战,因为他们对分油机没有专业知识,但他们邀请了专业老师进行指导,并观看了老师拆卸分油机的过程,以便对分油机的工作原理和零配件有更深入的了解。该作品将LeapMotion手部跟踪技术嵌入VR移动端,使用户可以放下手柄并使用双手进行操作,增加了交互感和沉浸感。团队通过参赛学习到了LeapMotion手部跟踪技术在不同平台的应用,并意识到了VR在赋能性教学方面的重要性。露电科技专注于VR、AR和MR的民用化和实用化,为各行业用户提供定制化的个性服务,并帮助行业用户节省成本、规避风险、改善用户体验,并抓住VR创新浪潮所带来的商机。他们表示将参加第二届Qualcomm XR大赛。
Qualcomm XR大赛分享:高度还原分油机拆卸完整过程

InflightVR用Pico VR头显为卡塔尔航空带来VR娱乐体验

卡塔尔航空与Inflight VR达成合作协议,从本月开始向特定航班的商务舱乘客提供基于Pico虚拟现实头显的沉浸式娱乐服务。Inflight VR首席执行官表示非常兴奋能够与卡塔尔航空合作,称赞卡塔尔航空一直将客户放在第一位,并在航空业中屡次颠覆规则。卡塔尔航空将与Inflight VR共同提供基于Pico头显的独特空乘娱乐选项,乘客可以探索航空公司提供的目的地、放松身心、进行冥想、爬上珠穆朗玛峰、与鲸鱼共游或在私人电影院观看大片等。该服务将首先在多哈飞往伦敦的QR007航班或多哈飞往新加坡的QR944航班的商务舱旅客或QSuite乘客中进行数周试点计划,根据情况将来扩展到其他航班。
InflightVR用Pico VR头显为卡塔尔航空带来VR娱乐体验

Facebook利用机器学习为移动VR构建全新低延迟高效能图形渲染框架

Facebook人工智能研究院最近通过博文介绍了一种利用集成式机器学习来实现低延迟移动VR图形的方法。他们开发了一个全新的框架,允许移动VR设备利用机器学习来提升图像质量和视频渲染效果。研究人员还创建了一个示例应用,可以通过重建更高分辨率的渲染来提高移动VR图形的保真度,同时还能够去除压缩伪影、进行帧预测、特征分析以及针对注视点渲染的反馈。新架构通过减轻模型执行负担,实现了异步化的专用处理器,与图形处理单元(GPU)和数字信号处理器(DSP)进行管道化处理。Facebook还对操作系统中的图形内存分配系统进行了修改,提高了性能并避免了复制过程。这一研究成果为下一代VR和AR体验提供了新的可能性,并可应用于移动计算图形领域的创新。
Facebook利用机器学习为移动VR构建全新低延迟高效能图形渲染框架

Valve Index将于3月10日凌晨2点重新补货

新型冠状病毒疫情对头显及其他硬件的生产产生了影响,导致Valve公司的Index头显一直处于断货状态。然而,Valve公司表示将在游戏《半衰期:爱莉克斯》发行之前补充新库存。最新消息表明,Index头显将于3月9日早上10点重新开售。需要注意的是,目前该系统仅向31个国家和地区销售,不包括中国。由于疫情影响,Valve公司表示"数量"将比预期少得多。考虑到《半衰期:爱莉克斯》的发布,届时可能会出现瞬间售罄的情况。因此,建议有购买意向的消费者做好准备。
Valve Index将于3月10日凌晨2点重新补货

Valve称《半衰期:爱莉克斯》是半条命的回归,或暗示更多系列作品

罗宾·沃克和克里斯·雷默在接受采访时表示,《半衰期:爱莉克斯》只是Valve“重返这个世界的宣告,而不是结束”。他们表示工作室成员都非常喜欢《半衰期》宇宙,并享受制作这款游戏的过程。沃克表示,《半衰期》对他们来说意义重大,有些团队成员从《半条命2》以来就在Valve工作,有些人甚至可以追溯到初代游戏。他们将《半衰期:爱莉克斯》视为重返这个世界的宣告。虽然他们没有详细说明是否会推出《半条命3》或者其他基于《半条命》宇宙的虚拟现实作品,但可以肯定的是Valve将继续为玩家带来更多的《半条命》作品。《半衰期:爱莉克斯》将于3月24日发行,而Valve刚刚确认Inde头显将于北京时间3月10日凌晨两点重新开售。
Valve称《半衰期:爱莉克斯》是半条命的回归,或暗示更多系列作品