在2023年8月10日的光合创作者大会上，快手首次公布了其在大模型领域的进展。快手AI、用户增长业务负责人王仲远展示了其全模态、大模型AIGC解决方案，以及AIGC数字人产品“快手智播”。该解决方案基于自研的基座大模型，提供文本、图像、3D、音乐和视频生成等技术，覆盖内容创作的全流程，从灵感启发到智能化制作。

7月，国内VR/AR硬件新品减少，投融资活动受到冷却，投融资金额环比下降71.7%。尽管如此，32条政策支持产业发展，相关活动增加。Meta推出Roblox Beta，PICO增设“抢先体验”区，苹果聚焦Vision Pro，引入NBA直播。硬件方面持续推出AR新品，AI与AR结合趋势明显，如ARknovv A1的AI图生图功能。内容方面，Roblox下载量突破100万，Quest平台和PICO上架多款新游戏，但整体设备销量低于预期，行业前景仍面临挑战。

苹果的Vision Pro标志着空间计算时代的到来，促使虚拟世界的建设讨论愈发频繁。优质的3D虚拟世界应当是开放的，支持用户和开发者共同创造，但目前各公司之间的兼容性差，缺乏统一的开放标准。英伟达在SIGGRAPH 2023大会上宣布成立OpenUSD联盟，致力于推动OpenUSD技术的标准化，以提升3D数据互操作性。OpenUSD技术将支持多家科技公司的平台，协助开发者在跨工具协作中提升效率。同时，随着AI技术的结合，元宇宙和数字孪生的需求急剧增长，为3D内容的标准化与生态系统建设提出新机遇。

最近，虚拟机项目UTM的开发者在X平台上分享了一段视频，展示Windows XP虚拟机成功启动在VisionOS模拟器上的过程。这表明在Vision Pro中运行Windows XP及后续版本已成为可能。不过，目前尚未实现与键盘及其他输入设备的连接，因此Windows XP仍无法进行实际交互，尚未成为实用系统。

Meta计划生产约1000副初代AR眼镜，主要用于内部开发和展示，未向C端市场推出。这些眼镜制造复杂，镜片中包含一种昂贵且受管制的化合物，因此需在美国组装，其他组件如腕带和计算包则由中国生产。

加利福尼亚州的软件开发公司Virtualitics最近宣布在C轮融资中筹集了3700万美元。该公司成立于2016年，由加州理工学院和美国宇航局位于帕萨迪纳的Jet Propulsion实验室共同创办。Virtualitics致力于利用增强现实（AR）和虚拟现实（VR）技术帮助公司进行数据可视化。据德勤和NewVantage Partners的调查显示，许多公司在有效利用自己的数据方面存在挑战。Virtualitics的联合创始人Michael Amori认为，现有工具无法揭示当今复杂数据背后的真相，并表示Virtualitics通过利用AR或VR来查看、分析和报告数据，使数据的使用更加易于上手和功能更强大。Virtualitics取得了显著的成功，收入同比增长了370%，这得益于与政府部门的合作。Amori表示，新的融资将用于行业合作、客户工作和员工招募，以满足日益增长的市场需求。

近眼显示技术专家卡尔·古塔格（Karl Guttag）继续对苹果Vision Pro进行分析，认为用虚拟屏替代物理屏是荒谬的想法。他通过将Meta Quest Pro的结果推导到Vision Pro的分辨率，展示了Meta Quest Pro的文本质量与现有计算机显示器的比较。他还引用了斯坦福计算成像实验室的研究，说明除了双眼视差和焦距，每只眼睛的运动也会传达出一定程度的深度感知。古塔格指出，苹果声称Vision Pro适合高分辨率文本和文本密集型应用程序，但MQP存在着针垫形畸变和注视-跟随视差等问题，这些问题可能导致显示器的其余区域变得模糊或不清晰。他认为，虚拟显示器必须远远好于MQP才能提供与物理显示器相同的小可读文本。由于光学问题和成本等限制，VR光学元件必须进行妥协。最后，古塔格强调，物理显示器不需要重新采样图像，并提供了与虚拟显示器相比的优点。

微软提交了一项名为“Re-creation of virtual environment through a video call”的专利申请，旨在通过视频通话重建虚拟环境。该技术可以允许远程用户从多个角度查看虚拟环境，而不仅限于AR设备的视角。在实施中，计算设备通过生成3D表示并使用算法改变视角来重建虚拟环境。用户可以选择暂停或解耦与另一个用户的视角，并且可以创建永久或半永久的虚拟摄像头视角。此外，该技术还可以集成过去捕获的数据以提供更完整和细节丰富的场景。计算设备可以根据环境中的物体位置和大小推断房间的大小，并在场景中添加现实世界对象（如第二摄像头）。该专利申请旨在提供更丰富和灵活的远程通话体验，并提供有助于会议、诊断、评估和艺术创作等功能的功能。

英伟达宣布其沉浸式协作平台Omniverse现在支持OpenXR，并扩展至HTC Vive、Magic Leap和Varjo等厂商的更多头显。此外，Omniverse还增加了基于RTX的光追功能、生成式人工智能和空间计算增强等特性。 Varjo通过视频展示了混合现实场景的实时光追效果。Varjo将混合现实与NVIDIA Omniverse相结合，为XR开发者和用户提供高保真的真实感和实时光追功能。通过NVIDIA Omniverse与Varjo XR-3的组合，可以实现高度真实的汽车模型渲染。 Varjo表示，实时光追是3D可视化的圣杯，过去的图形和计算需求使得VR无法对逼真场景进行光线追踪，但在NVIDIA Omniverse的支持下，混合现实开发者和用户将能够在Varjo XR-3中渲染逼真的场景，并解锁光线追踪。Varjo的人眼分辨率硬件、Omniverse平台的光线追踪功能和下一代GPU的结合，将改变混合现实设计、工程、娱乐和虚拟协作的各个方面。 最新版本的NVIDIA Omniverse将支持Varjo XR-3的视网膜分辨率Quad View四视图渲染，通过Varjo XR-3设备合成两个高分辨率视图和两个低分辨率视图。使用NVIDIA RTX 6000 Ada Generation GPU和多GPU设置，任何团队都可以将沉浸式体验提升到全新的视觉保真度。

通过这篇文章可以了解到，3M公司正在研究开发一种旨在改善AR/VR头显的光学系统。他们认为，折叠光学透镜模块可以为VR/AR提供紧凑设计、高分辨率、宽视角和低畸变。然而，目前的显示设备不是为折叠光学透镜模块设计。为了解决这个问题，3M构思了一种光学系统，其中光轴为中心，并包括用于生成图像的显示面板和用于照明的照明源。光学系统还包括光重定向膜和透镜组件，用于传输和重定向光锥，以确保图像光锥覆盖显示面板并传输图像。通过这种设计，3M表示该光学系统可以提供改进的亮度均匀性、对比度和亮度，并减少光学伪影的出现。这项技术可以应用于AR和VR应用。