Insider Insider

索尼分享《生化危机4:重制版》的PSVR 2初体验

卡普空在9月中旬的State Of Play发布会上宣布,他们的游戏《生化危机4:重制版》将于今年年底支持PSVR 2的VR模式。索尼在东京游戏展上分享了他们通过头显来玩游戏的初体验。VR模式邀请玩家潜入《生化危机4》的世界,扮演里昂并体验沉浸式的生存任务。在PSVR 2头显的4K HDR显示器下,森林环境变得异常生动。通过Sense控制器,玩家可以挥舞里昂的刀刃和各种武器,实现双手摆动的真实感。玩家可以通过挡格和攻击来对抗敌人,这种动作在VR中非常容易完成。装填子弹也成为一种身临其境的体验。虽然东京游戏展的Demo只展示了游戏的开头,但这种新鲜的体验让人期待后面的场景和玩法。《生化危机4:重制版》的VR模式有望成为重温这个经典作品的绝佳方式。
索尼分享《生化危机4:重制版》的PSVR 2初体验

微软专利提出可扩展动态合成声音技术,通过多层优化实现高效HRTF效果

微软公司已申请了一项名为“Efficient hrtf approximation via multi-layer optimization”的专利,提出了一种可扩展的动态合成声音技术。该技术通过近似HRTF来实现逼真的虚拟音效,并降低了计算成本。技术通过离线过程和实时过程实现。在离线过程中,网络使用HRTF数据集进行迭代微调,直到输出近似HRTF数据集接近输入HRTF数据集。在实时过程中,近似数据用于驱动网络,实现音频信号的呈现。近似数据包括混合通道增益、有限输入响应FIR滤波器的系数和基滤波器的形状。方法还包括基于特定位置选择混合通道增益集、系数和基滤波器形状来呈现音频信号。该技术可以在XR设备中用于实现逼真的虚拟音效,而无需高昂的计算量和实际的HRTF滤波器。
微软专利提出可扩展动态合成声音技术,通过多层优化实现高效HRTF效果

纽约大学基于HoloLens 2开发AR+AI虚拟助手,提供及时音视频反馈

纽约大学的计算机科学、工程和数据科学教授克劳迪奥·席尔瓦(Claudio Silva)带领的团队正在开发一种AR+AI的解决方案。该解决方案利用微软HoloLens 2头显和人工智能虚拟助手,为用户提供实时的视觉和音频反馈。项目得到了美国国防高级研究计划局DARPA的资助,旨在通过增强现实和人工智能技术来帮助人们执行复杂任务并扩展他们的技能。席尔瓦将该项目描述为“类固醇清单”,旨在开发一个透明、可解释和多模态个人助理系统,可以“看到”和“听到”用户的内容,解释时空背景,并提供语音、声音和图形反馈。该团队的目标是开发一个与用户交互的动态智能代理,不仅对环境做出反应,还能对用户的情绪状态、位置和周围条件做出反应。项目团队由计算机、可视化、人机交互、增强现实、图形、计算机视觉和自然语言处理等方面的研究人员组成。他们使用微软HoloLens 2头显作为硬件平台进行测试。席尔瓦提到,由于HoloLens 2头显具备大量的传感器,可以提供丰富的输入数据,因此是该系统的理想实验平台。他们还在训练系统方面取得了进展,让系统通过解释视频帧来定位动作的起点和终点。该项目的论文在IEEE VIS 2023大会上获得了最佳论文荣誉奖。席尔瓦指出,该项目专注于以人为中心和数据密集型计算,并利用先进的数据分析和可视化技术来阐明潜在因素。他强调该项目的实际应用性,设计用于现实世界中的系统而非理论实践。
纽约大学基于HoloLens 2开发AR+AI虚拟助手,提供及时音视频反馈

苹果推出开发者专家交流资源库,已上线两场Vision Pro开发讲座

苹果最近宣布推出了全新的资源平台“Meet with Apple Experts”,旨在帮助开发者了解最新的苹果工具和资源,并提供课程、研讨会、实验室、一对一咨询等活动以提升应用体验。该平台已经开始上线与visionOS相关的活动,提供了50个课程、研讨会和咨询项目,为全球开发者提供与苹果专家直接沟通的机会。开发者可以报名参与多种主题的课程,深入学习如何针对最新发布的硬件产品优化app和游戏,特别是对于新兴的visionOS而言,与苹果专家直接沟通并获得帮助和指导将有助于开发者更好地理解这一媒介并开发出优秀的空间计算内容。苹果还积极提供相关的工具和资源来帮助visionOS的开发者,以帮助创作者和学习者构建更光明的未来和更美好的世界。开发者可以访问Meet with Apple Experts页面或申请参加Apple Vision Pro开发者实验室来获得更多支持和参与活动的机会。
苹果推出开发者专家交流资源库,已上线两场Vision Pro开发讲座

郭明錤:苹果可能已经取消低价版Vision Pro的研发计划

据消息人士称,苹果可能已经取消了低价版Vision Pro的研发计划,因为其产量受制。根据分析师预测,Vision Pro在2024年的出货量最多为40-60万台,远少于市场预期的100万台以上。这也与早前媒体的报道相吻合,提到苹果由于设计复杂性和生产困难,将最初的100万台出货量目标调整至40万-50万台。苹果对供货商和代工厂的生产效率不满,尤其对Micro-OLED的产量不满,已经要求索尼扩大产能。然而,据韩媒报道,索尼拒绝了苹果的要求。郭明錤进一步指出,苹果可能取消低价版Vision Pro的研发计划,并提到了Vision Pro 2,预计最晚在2027上半年量产。郭明錤肯定了苹果的空间计算体验,但认为苹果需要更长的时间说服消费者。他认为Vision Pro可能需要花费比市场预期更多时间才能成为苹果的下一个明星产品。
郭明錤:苹果可能已经取消低价版Vision Pro的研发计划

威尼斯沉浸式体验2023批评家圆桌会议:剖析全部43个项目

最近听到一个关于全浸入叙事、体验设计和未来空间计算的播客节目“听觉与现实(Voices of VR)”的最新一集,主要讨论了威尼斯全浸入2023的一些项目。主持人Kent Bye邀请了XR产业中的各领域专家,一起对这些项目进行深入探讨。其中讨论了一些备受关注的作品,如《皇帝》、《路人之歌》、《托普罗曼斯》和博士马鲁的作品。对每个作品的评价不尽相同,但共同观点是,这些作品利用了虚拟现实和增强现实等技术,给用户带来了独特的体验和情感的共鸣。这些作品中,创作者们通过音频、视觉、互动等方式创造了令人震撼的感官体验,引发了用户对各种话题的思考和讨论。整个讨论涉及了很多关于现实与虚拟交织、技术与故事结合等层面的话题,对XR领域的发展和未来趋势有所启示。《复合7》是芬斯制作的一款VR聊天作品。游戏的主要目标是为玩家创造一个与人工智能对话的体验。玩家将扮演一位特工,与一位名为Sophie的AI进行互动,通过与她对话来解决谜题和推动剧情发展。游戏中的对话基于玩家在游戏中做出的选择,将决定故事的发展方向和结局。《复合7》通过引入人工智能角色,探索了虚拟现实中与AI对话的可能性,并提供了一种更互动和个性化的游戏体验。虽然游戏的剧情较为简单,但通过与AI角色进行互动,玩家能够更好地体验到虚拟现实的沉浸感和互动性。来传达关于人类对环境造成的破坏和自我毁灭的故事。故事以一个蜂巢的象征化呈现,通过视频投影展示了人类活动对自然的影响。故事开始于蜜蜂的正常活动,然后逐渐变得混乱,展示了人类抗议和自然环境的破坏。最后故事回到起点,展示了一个乐观的结局,让我们思考家的真正意义和我们对环境的责任。这是一件非常引人注目的装置作品,通过独特的空间设计和叙事方式,让观众对环境问题和可持续发展产生思考。今年的威尼斯沉浸式节目展示了一系列令人印象深刻的作品。与往年相比,今年的作品更具创新和技术进步,涵盖了从影视作品到虚拟现实的各种类型。其中包括与大屠杀和第二次世界大战有关的作品,如《人类小提琴前奏曲》和《三月故事》。这些作品以宏观的视角审视了生命、死亡和音乐,以非常抽象和超现实的方式传达思想。另外还有一些与VR Chat有关的作品,如《杂物间》和《我们在夜间移动》,它们通过探索空间和音乐等元素推动了创新。这些作品展示了创作者们对于沉浸式叙事和虚拟现实技术的发展所做出的努力。然而,对于部分观众来说,节目的预订和观赏体验仍存在一些挑战,需要进一步改进。总的来说,今年的节目选择出色,展示了沉浸式媒体领域的创新和发展。

用“记住这个地方”捕捉被摧毁的巴勒斯坦房屋的档案

Voices of VR播客是关于沉浸式叙事和体验设计的播客,专注于空间计算的未来。在第34集中介绍了一部关于被流放、隐居和难民主题的作品,名为"记住这个地方:北纬31度20分46秒 东经34度46分46秒"。该作品探讨了被军事占领的以色列巴勒斯坦地区的贝都因社区,记录了被摧毁的房屋和相关故事。制作者希望通过呈现这个冲突中的深层复杂性以及保留不同故事的多样性来引起观众的共鸣。作品注重环境和身体存在感,在虚拟现实中进行体验,并通过手册获取更多背景信息。该作品特别关注巴勒斯坦妇女在冲突背景下的身份认同和家庭关系。制作者希望通过沉浸式叙事让观众更深入地理解这些主题,并探索沉浸式媒介的潜力。播客还提到制作过程中的考虑,如语言翻译和故事整合等。

《虚拟朋友》体验设计的深度剖析

是的,你提到的互动梗概和递归过程在体验开发中非常重要。你先从剧本和表演中开始,然后将其转化为Unity中的实际互动元素。你通过不断迭代和调试来改善体验的流畅性和故事传达。你尝试了不同的互动方式,并在其中找到了平衡点。你还尝试了全方位视频捕捉,并使用头部重定位来确保角色与玩家的连接。在开发过程中,你还修正了一些场景,并重新捕捉了一些表演来保持连贯性。整个开发过程是一个挑战,但你最终成功地创造了一个令人投入并具有情感深度的体验。你在开发过程中进行了不断的迭代和调整,以达到最终的效果。非常感谢你与我分享这个令人兴奋的体验开发过程。《想象朋友》的剧作家David Chalmers在TED演讲中提到了意识的本质和它是否是现实的深层本质的问题。他认为意识是最深层的现实,而不是从我们的物理神经元中产生的。这是一个尚未解决的哲学问题,没有足够的证据可以证明意识来自于物质的这一观点。因此,目前的观点是大脑是意识的接收器,而意识来自更深层次的现实。然而,这仍然是一个未解之谜,给其他替代形而上学系统带来了可能性。 这种未解决的问题被称为“意识之谜”,因为关于意识的本质还有很多未知之处。正是由于这个未知,为其他系统打开了可能性的大门。查尔默斯更多地关注物质形而上学领域,那是我们开始了解替代形而上学系统的地方。大部分西方分析哲学认为现实的基础是物质。然而,在涉及量子领域时,这个观点就会崩溃,因为量子领域涉及到潜势的所有可能性。这一观点可以从埃弗雷特的多世界解释中看出,实际上所有可能的东西都会实际化。然而,这些潜在的实际化是在我们无法观测到的正交宇宙中发生的。所以虽然这是解决物质形而上学的一种方式,但我们无法观测到这些现象,所以无法证实它。根据Matt Siegel的播客,可能不存在多个宇宙,而只是潜势的存在。量子波函数是可能性领域,即可能性的存在,当波函数坍缩时,你从可能性转变为实际发生的事物,这是从可能性到现实的坍缩。大部分物质形而上学认为只有坍塌成实际的事实才是真实的,但过程形而上学认为不是这样的。现实的最深层本质是动态的,不断变化的,更接近于中国哲学中的观念。虚拟现实(VR)引起了对这些更深层次现实本质的疑问,即现实的本质是什么,如果现实的本质是关系、潜势和想象力,那么你可以通过这种方式到达现实的最深层次。将VR与这些概念结合起来非常有趣,可以影响我们的认知和创造力。