Nweon

谷歌在名为“Foveated beamforming for augmented reality devices and wearables”的专利申请中提出了一种基于用户注视点来确定聚焦波束成形方向的方法。该技术可以通过跟踪用户眼睛位置来确定用户的注视点，然后使用眼睛跟踪波束成形来增强用户注视方向的声音，并抑制其他方向的声音。此外，该专利还提出了使用波束成形音频的相关应用，例如语音转文本和音频播放。使用波束成形音频可以提高语音转文本的准确性和可理解性。同时，根据注视方向调整转录的视觉特征可以更好地识别语音来源。此外，该技术还可以在音频播放时根据注视方向进行波束成形，以增强特定方向的声音。该专利申请于2021年9月提交，并最近由美国专利商标局公布。

Meta最近提交了一项名为“Eye data and operation of head mounted device”的专利申请，介绍了一种利用眼睛数据操作头戴设备的方法。该方法可以根据眼睛追踪数据来调整头戴设备的各种操作，例如调整显示器亮度。申请中还描述了眼动追踪器的结构，包括近眼光学元件和照明层等组件。通过眼动追踪技术，可以捕获眼睛的位置、瞳孔大小、眼睛运动等数据，并将其与环境光测量结果相关联。根据这些数据，可以调整头戴设备的透镜透明度，以使场景光的强度达到舒适的预设值。专利申请还提到了使用图像处理技术来确定各种眼睛特征的大小和位置，并利用先前环境光测量和眼睛数据来驱动透镜的透明度。这项专利申请对于AR/VR头显的眼动追踪技术和用户体验的提升具有重要意义。

晕动症是影响虚拟现实（VR）头显普及的一个挑战，报道称有38%至66%的VR用户在使用设备时会感到头晕和恶心。以色列公司Eye Minders正在研究解决这一问题的方法，他们认为训练用户在令人晕动感的环境下可以帮助大脑克服晕动症。关键是提供一个监测用户感受并实时指示何时连接和断开的系统。该系统的算法可以嵌入游戏应用、头显或两者之中，追踪细微的眼球运动以确定用户的感受，当认为用户即将晕动时断开体验或提供舒缓的体验。Eye Minders希望通过这种方式锻炼用户的抗晕动能力。Eye Minders的首席执行官表示，晕动症会受到内容、硬件、软件和个体情况的影响，因此训练方法必须根据个人进行个性化训练。Eye Minders希望能在2023年底前将首批产品嵌入相关的软件和硬件之中，与苹果进行合作，并与开发者进行紧密合作。虽然该公司面临竞争，但越来越多的团队正在研究解决晕动症的方法，这对VR行业来说是一个利好。

苹果宣布将于2023年6月6日至10日在线上形式举办年度全球开发者大会WWDC 2023，并在Apple Park举办开放日特别体验。市场预计，今年WWDC的焦点将是首款MR/VR设备的正式发布。然而，天风国际分析师郭明锳表示，苹果的MR/VR头显组装量产时间再度推迟，这为设备能否如期在WWDC 2023发布增加了不确定性。郭明锳指出，由于苹果对于首款MR/VR头显的期望不像当年iPhone那样乐观，组装量产时间再度延后1-2个月，推迟至2023年Q3季度中后期。由于组装量产时间的推迟，今年头显的出货量预计仅为20-30万台，低于市场预期的50万台或以上。彭博社报道指出，苹果高管们清楚混合现实是一个新兴领域，对进入该市场的挑战十分了解。对于XR头显，苹果需要向消费者解释为何他们需要拥有这样的产品。因此，高管们对这个新产品采取了谨慎务实的态度，认为它可能会遵循与Apple Watch类似的发展轨迹。目前，苹果尚未对此消息置评。

3月25日至29日，国际顶级学术会议IEEE VR 2023在上海浦东香格里拉大酒店举行。虚拟现实科技品牌YVR携旗舰产品YVR 2亮相会议。会议是虚拟环境下3D用户界面和人机交互技术的主要交流平台，代表着行业的标准和趋势。YVR是一个快速崛起的新兴品牌，旨在成为元宇宙基础设施建设者。2022年，YVR发布了消费级产品YVR 2，成为全球首款量产的Pancake光学VR一体机，并搭载自研VSLAM算法，实现了出色的视觉效果和6DoF追踪体验。YVR的产品展示获得了全球与会专家和从业者的一致好评。YVR始终坚持核心技术的自主研发，拥有全球领先的计算机视觉算法能力。目前，YVR已经与高通、JDI、3M、BYD、和硕、欧菲光、Unity等全球头部企业成为生态合作伙伴。未来，YVR将继续创新技术，与更多优秀企业合作，为更多用户打开通往虚拟宇宙的大门。

视频会议已经成为人们联系的重要方式，但目前的视频通话仍属于2D表示。因此，实现更进一步临场感的AR/VR成为了行业的关注点。Meta在一项名为“Parallel video call and artificial reality spaces”的专利申请中介绍了建立和管理作为视频呼叫的并行平台的XR空间的方法。该系统可以通过识别正在进行的视频呼叫事件来创建并行的XR空间，并允许用户从普通的视频通话过渡到连接的XR环境，以促进更深入的交流。在视频呼叫开始时，XR连接系统可以连接到提供视频呼叫的系统，并提供一个或多个虚拟相机的视图作为连接到视频通话的反馈。这样，参与视频通话的人员可以看到XR空间中的一个或多个视图。此外，系统还可以根据用户是否是视频呼叫的受邀者，自动将用户添加到XR空间进行视频通话，或者提供进入XR空间的选项。这项专利的申请于2021年9月提交并公布。

苹果宣布将于2023年6月6日至10日以线上形式举办WWDC 2023全球开发者大会，并在Apple Park举办开放日特别体验。市场预计今年的焦点将是首款MR / VR设备的正式推出。彭博社、苹果爆料人士郭明錤和《金融时报》等情报来源纷纷指出，苹果有望在今年WWDC发布首款MR / VR头显。邀请函上的图案与VR头显常用的菲涅尔透镜非常接近，也给出了这个暗示。据报道，首席执行官蒂姆·库克将主持第一天的重点活动。库克希望将AR / VR作为自己最后一个奋斗场，给苹果和世人留下自己值得铭刻和纪念的痕迹。相信我们有望在今年6月的WWDC上见证库克押注的全新产品推出。

Meta的全球事务负责人Nick Clegg表示，计算的未来将发生在尚未完全定义的沉浸式世界——元宇宙中。他认为未来的体验会更加流畅，设备更加轻便，Avatar也会更加自然。与其他科技公司对元宇宙的态度形成鲜明对比，Meta坚定地相信AR/VR元宇宙是计算的未来。他指出Meta可以通过广告和电商来变现对元宇宙的投资，例如通过利用Facebook和Instagram的用户数据实现精准广告投放。此外，教育和医疗行业也被认为是元宇宙的潜力领域。Meta致力于邀请研究人员、民间组织和其他公司参与元宇宙的开发，以实现真正的创造力、独创性和快乐。Clegg补充道人们将会回忆起今天的头显，就像回忆起过去的手机一样，认识到罗马并非一日建成，元宇宙的发展也需要时间。

美国陆军正在积极开发微软的HoloLens搭载的集成视觉增强系统IVAS，该系统旨在提高士兵在战场上的机动性和杀伤力。IVAS利用全天候作战护目镜和混合现实平视显示器，为士兵提供高分辨率模拟和态势感知工具，从而改善战场规划、决策和瞄准等能力。IVAS将于明年开始部署，但目前美军正在通过用户研究和士兵测试来利用IVAS的嵌入式训练功能。通过战术小队沉浸式虚拟训练器SiVT，美国陆军希望提升训练的逼真程度和效率。SiVT允许士兵在安全逼真的混合现实合成环境中进行战术小队规模的训练，通过全息图形式呈现场景中的各种元素，让士兵迅速做出决策并进行团队间的沟通和合作。SiVT还可以用于投掷虚拟闪光弹和虚拟手榴弹等训练。这种灵活有效的培训工具消除了对靶场、运输、弹药或后勤规划的需要，可以在几乎任何地方、任何时间用于士兵训练。美国陆军总结认为，士兵越多地使用SiVT，他们就能越熟练地掌握相关作战技能并充分利用IVAS的所有功能。

增强现实技术可以通过透明显示器将计算机生成的内容叠加到物理环境中，但来自物理环境的光线可能会干扰计算机生成的内容。微软提出了一种基于环境光来渲染混合现实对象的方法。该方法通过摄像头获取可穿戴计算设备所在环境的图像，并获取环境光信息，然后基于环境光信息渲染对象，使用户能够看到具有环境光效果的对象。摄像头可以与可穿戴计算设备分开设置，也可以集成在设备中。可以预先确定摄像头的拍摄方向，以完全覆盖可穿戴计算设备所在的环境。通过调整摄像头参数和图像像素值，可以获取更准确的环境光信息。通过更新环境光信息，可以改善渲染对象的真实性和用户交互体验。该专利申请于2022年提交。