(
映维网Nweon
2024年12月09日
)近期美国专利及商标局公布了一批全新的AR/VR专利,以下是映维网的整理(详情请点击专利标题),一共113篇。更多专利披露请访问映维网专利板块
https://patent.nweon.com/
进行检索,你同时可以加入映维网AR/VR专利交流微信群(详见文末)。
1. 《
Meta Patent | Hybrid image sensors with multimode shutters(Meta专利:具有多模快门的混合图像传感器)
》
在一个实施例中,具有多模快门的示例混合图像传感器包括多个像素阵列,每个像素阵列包括多个象素,每个象素包括配置成响应于入射光产生并存储电荷的光感测元件;每个像素阵列包括:电荷存储装置,其配置为从像素阵列的每个光感测元件接收电荷;第一组开关,所述第一组开关中的每个开关连接在所述像素阵列的相应像素和所述电荷存储器件之间;第二组多个开关,所述第二组开关包括高分辨率选择开关和低分辨率选择开关,每个所述高分辨率选择开关和所述低分辨率选择开关并联连接到所述电荷存储装置的输出;多条像素输出线,每条像素输出线配置为输出表示与耦合到相应像素输出线的一个或多个像素阵列对应的像素值的信号。
2. 《
Meta Patent | Intensity imaging and depth sensing with histogram overflow prevention(Meta专利:具有直方图溢出防止功能的强度成像和深度传感)
》
在一个实施例中,专利描述的深度和成像像素包括单光子雪崩二极管(SPAD)微像素。存储器存储直方图数据和强度数据。定时存储器选择逻辑配置为生成直方图数据和强度数据。
3. 《
Meta Patent | Reverse pass-through glasses for augmented reality and virtual reality devices(Meta专利:用于增强现实和虚拟现实设备的反向透视眼镜)
》
在一个实施例中,专利描述的设备包括目镜,目镜包括光学表面,光学表面配置为在光学表面的第一侧向用户提供图像。设备同时包括第一摄像头、显示器和屏幕,第一摄像头配置为在第一视场中收集从光学表面反射的用户面部的一部分的图像,显示器与光学表面相邻,并配置为向前投影用户面部的图像,屏幕配置为接收来自显示器的光并将用户面部图像提供给旁观者。
4. 《》
在一个实施例中,专利描述的方法包括接收为给定用户或活动构建或修改规则或策略的请求,基于用户或活动获得模板,显示模板和用于编辑模板的工具,通过用户与用户界面的工具交互接收对模板的修改,以及基于修改修改修改模板以生成规则或策略。
5. 《
Meta Patent | Goal-driven human-machine interaction architecture, and systems and methods of use thereof(Meta专利:目标驱动的人机交互架构及其系统和使用方法)
》
在一个实施例中,专利描述的方法包括评估用户的基于语义的查询,查询包括用户目标,并评估概率值和第一目标概率值,这两者都与活动的数字动作相关联。所述方法进一步包括生成决策引擎,以使用第一目标概率值和概率值来确定用户摩擦值和与用户目标相关联的第二目标概率值。另外,所述方法包括使用第一目标概率值和概率值来确定用户摩擦值和第二目标概率值。基于用户摩擦值、第二目标概率值和用户目标确定数字动作计划。响应于确定用户摩擦值超过预定阈值,基于对用户的基于语义的查询生成查询以调整活动数字动作。
6. 《
Apple Patent | Api for spatial audio controls(苹果专利:用于空间音频控制的API)
》
在一个实施例中,播放音频的方法包括执行操作系统和应用程序;由操作系统经由应用编程接口从应用接收音频会话参数,音频会话参数包括空间体验值,空间体验值提供用于与应用相关联的音频的空间回放的指令;由操作系统从应用程序接收播放音频数据的指令;由操作系统基于空间体验值调整音频数据;由操作系统向两个或多个扬声器发送调整后的音频数据。
7. 《
Apple Patent | Video camera optimizations based on environmental mapping(苹果专利:基于环境映射的摄像头优化)
》
在一个实施例中,头戴式装置将一个或多个前置摄像头馈送中继到用户眼前的显示面板;基于评估摄像头在图像/视频中捕获的物理环境中的照明来调整这一个或多个摄像头的曝光。可以调整摄像头曝光,以减少物理环境中一个或多个光源的闪烁。是否以及如何调整曝光以减少闪烁可以基于与来自一个或多个光源的闪烁可见性。
8. 《
Apple Patent | Systems and methods of presenting mixed media in a three-dimensional environment(苹果专利:在三维环境中呈现混合媒体的系统和方法)
》
在一个实施例中,当内容项显示在三维环境中的虚拟回放用户界面中时,电子设备显示与三维环境中内容项对应的三维表示。三维表示包括事件场地的表示和/或事件参与者的表示。在一个实施例中,三维表示中包括当前在内容项的广播/流的相机视图中未显示/不可见的会场部分和/或活动参与者的子集。三维表示可配置为独立于三维环境中内容项的显示进行交互。
9. 《
Apple Patent | Devices, methods, and graphical user interfaces for capturing and viewing immersive media(苹果专利:用于捕获和查看沉浸式媒体的设备、方法和图形用户界面)
》
在一个实施例中,响应于硬件输入,使用头戴式显示设备的多个传感器捕获和生成沉浸式媒体。在显示媒体项目时,响应于检测到观众的注意力偏离媒体项目,显示与媒体项目相关的附加信息。
10. 《
Apple Patent | Techniques for displaying and capturing images(苹果专利:显示和捕获图像的技术)
》
在一个实施例中,来自图像流的第一组图像可用于生成第一组变换图像,并且变换图像可以显示在一组显示器。响应于与媒体捕获事件相关联的捕获请求,可以从图像流中选择第二组图像,并且可以使用第二组图片来生成第二组变换后的图像。可以从第二组变换图像生成一组输出图像,并且可以存储或传输该组输出图像以供日后查看。
11. 《
Apple Patent | Recording content in a head-mounted device(苹果专利:头显录制内容)
》
在一个实施例中,专利描述的设备可以包括配置为渲染虚拟内容的图形渲染管道、配置为获得用户追踪信息的追踪传感器、配置为基于虚拟内容和用户追踪信息合成虚拟帧的虚拟内容合成器、配置为捕获视频馈送的摄像头、配置为覆盖合成的虚拟帧和视频馈送的媒体合并合成器,以及配置为在扩展现实记录文件中记录参数、元数据、原始内容和/或调整后的内容的记录管道。
12. 《
Apple Patent | Adaptive virtual content magnification(苹果专利:自适应虚拟现实内容放大)
》
在一个实施例中,诸如混合现实设备之类的电子设备可以在显示器呈现虚拟对象,并提供虚拟放大器来改变(例如放大)虚拟对象。虚拟放大器放大第一虚拟对象,随后放大第二虚拟对象。电子设备可以提供一个或多个效果,例如最初保持第二虚拟对象的当前大小,随后基于第一虚拟对象调整第二虚拟目标的大小,包括第一虚拟对象和第二虚拟对象之间的相对深度。在一个实施例中,在电子设备的位置变化或用户注视位置的变化等于或高于阈值的情况下,应用用于稳定放大对象的过程。
13. 《
Apple Patent | Color correction for electronic device with immersive viewing(苹果专利:用于沉浸式观看的电子设备的色彩校正)
》
在一个实施例中,专利描述的电子设备包括配置为捕获视频馈送的一个或多个图像传感器、配置为基于从捕获的视频馈送计算的亮度水平,和/或基于捕获视频馈给中的照明的色温,或发光体类型对捕获的视频馈送执行颜色校正以使用适于沉浸式观看条件的第一色度自适应模型生成相应的颜色校正视频馈送的图像信号处理器、以及配置为输出颜色校正视频馈给的一个或者多个显示器。电子设备同时可以包括记录管道,其配置为记录捕获的视频馈送的版本,并且可以将记录的内容共享或传输到外部设备。外部设备可以使用适于非沉浸式观看条件的第二色度自适应模型来显示记录的内容。
14. 《
Apple Patent | Inter-application networking profiles for electronic devices(苹果专利:电子设备的应用程序间网络配置文件)
》
在一个实施例中,应用间网络简档可以包括例如由一个应用生成并提供给另一个应用的网络简档。然后,另一个应用可以以基于从一个应用接收到的网络简档确定的数据速率发起其网络通信。在一个实施例中,第一应用可以生成三维物理空间的三维网络简档图。
15. 《
Apple Patent | Electronic device with antennas(苹果专利:包含天线的电子设备)
》
在一个实施例中,专利描述的电子设备可以具有第一和第二后向显示器、前向显示器、位于前侧的覆盖层以及具有收发器和天线的无线电路。收发器可以使用非蓝牙低延迟音频通信协议通过左耳机和右耳机传输音频数据。天线可以安装在与外围区域重叠的设备的底侧、设备的后侧,或者可以安装在头带之上。天线可以包括同时向两个耳塞传送音频数据包的单个天线,或者可以包括同时向左和向右耳塞传送音频信息的第一和第二天线。
16. 《
Apple Patent | Electronic device with sheet metal antenna(苹果专利:带金属板天线的电子设备)
》
在一个实施例中,专利描述的电子设备可以具有第一和第二后向显示器、前向显示器、与前向显示器重叠的前侧的盖子以及通过盖子辐射的天线。天线可以由金属片形成。天线可以具有由金属板的第一部分和天线地线形成的谐振元件,天线地线包括由腔体与第一部分隔开的金属板的第二部分。金属板的第三部分可以将第一部分连接到第二部分,并且可以围绕腔体折叠以产生将第一部分压在盖子上的弹簧力。第一部分和盖子可以具有相同的复合曲率。第二部分可以形成用于天线的导电腔。
17. 《
Apple Patent | Augmented reality display system(苹果专利:AR显示系统)
》
在一个实施例中,专利描述的AR显示系统包括在车辆之中,并配置为在车辆的一个或多个透明表面生成增强现实显示。AR显示器可以包括车辆速度的指示器,指示器根据车辆相对于本地速度限制的速度在空间定位。AR显示器可以包括符合环境对象的显示元素,并且可以模糊和替换对象显示的内容。AR显示器可以包括基于监视驾驶员对车辆的手动驾驶性能来模拟环境中的一个或多个特定环境对象的显示元件。
18. 《
Apple Patent | Vignetting of foveated display content systems and methods(苹果专利:注视点显示内容渐晕系统和方法的可视化)
》
在一个实施例中,专利描述的系统可以包括用于显示图像帧的显示器,图像帧基于显示图像数据划分为具有相应分辨率的区域。设备同时可以包括图像处理电路,并用于基于多分辨率图像数据和渐晕数据生成显示图像数据,渐晕数据是通过确定像素分组的相位偏移而生成,相位偏移指示像素分组与渐晕网格的网格线之间的相对距离,并基于相位偏移确定像素分组相对于一组网格点的相对位置,并在该组网格点之间的渐晕值之间插值以基于相对位置生成渐晕数据。渐晕网格可以包括具有相应渐晕值的多个网格点。另外,图像处理电路可以将渐晕数据应用于像素分组的多分辨率图像数据。
19. 《
Apple Patent | Micro-oled sub-pixel uniformity compensation architecture for foveated displays(苹果专利:用于注视点显示器的Micro-OLED亚像素均匀性补偿架构)
》
在一个实施例中,专利描述的电子显示器可以包括显示面板、配置为存储图像数据的图像源和图像处理电路,显示面板包括多个显示像素。图像处理电路可以接收显示面板的亮度水平,并接收可以包括多个显示像素中的第一显示像素的灰度级数据的图像数据。图像处理电路可以基于亮度水平将灰度级数据转换为电压数据,基于全局电压补偿值和局部电压补偿值确定对电压数据的补偿,并将补偿应用于电压数据以生成补偿电压数据。图像处理电路可以压缩补偿电压数据的范围,并将补偿电压数据转换为第一显示像素的补偿灰度级数据。
20. 《
Apple Patent | Methods for moving objects in a three-dimensional environment(苹果专利:在三维环境中移动对象的方法)
》
在一个实施例中,计算机系统便于在三维环境中相对于第二虚拟对象移动和/或放置第一虚拟对象。计算机系统利用不同的运动算法在三维环境中移动对象。
21. 《
Apple Patent | Devices, methods, and graphical user interfaces for content applications(苹果专利:用于内容应用程序的设备、方法和图形用户界面)
》
在一个实施例中,计算机系统在呈现内容项的同时生成虚拟照明效果。在一个实施例中,计算机系统在呈现内容项的同时生成动画三维对象。在一个实施例中,计算机系统响应于不同的输入而显示压缩的用户界面来代替扩展的用户界面。
22. 《
Apple Patent | Late-stage warp of dynamic-anchored content(苹果专利|:动态锚定内容的后期扭曲)
》
在一个实施例中,专利描述的方法包括使用图像传感器捕获物理环境中对象的图像;基于图像获得对象在显示时间在物理环境中的第一预测对象姿态;基于第一预测对象姿势渲染虚拟内容;在显示时间获得物理环境中对象的第二预测对象姿态;基于第二预测对象姿势扭曲虚拟内容;在显示时间在显示器显示扭曲的虚拟内容。
23. 《
Apple Patent | Techniques for managing computer-generated experiences(苹果专利:用于管理计算机生成体验的技术)
》
在一个实施例中,专利描述的方法包括:从第一应用接收在环境中呈现第一对象的请求;以及响应于接收到在环境中渲染第一对象的请求,渲染第一对象;在渲染第一对象之后,当第一对象在环境中显示时,检测到改变第一应用提供的内容大小的请求的指示;以及响应于检测到改变由第一应用提供的内容的大小的请求的指示,相应地呈现环境的表示。
24. 《
Apple Patent | Devices, methods, and graphical user interfaces for real-time communication(苹果专利:用于实时通信的设备、方法和图形用户界面)
》
在一个实施例中,专利描述地方法包括:通过一个或更多个显示生成部件并在三维环境中显示实时通信用户界面,实时通信用户接口对应于计算机系统的用户与实时通信会话中与计算机系统的不同用户之间的实时通信会话;经由所述一个或多个显示生成组件显示所述实时通信会话中的一个或更多个参与者中的第一参与者的第一空间约束表示。
25. 《
Apple Patent | Devices, methods and graphical user interfaces for preview of computer-generated virtual objects for extended reality applications(苹果专利:用于扩展现实应用程序的计算机生成虚拟对象预览的设备、方法和图形用户界面)
》
在一个实施例中,内容预览包括基于对应用程序源代码的修改而更新的内容项的视觉预览。内容预览包括多个视口,每个视口都是独立可控。内容预览的每个视口都可以“暂停”,以防止视口因源代码的修改而更新,而与其他视口关联的内容预览则会随着源代码的更改而修改。这样,开发者在预览应用程序中开发内容时,可以直观地比较内容项的不同版本。设备与内容预览同时显示边界体积,以直观地描绘内容项的大小与与软件应用程序相关联的三维环境的三维大小之间的关系。
26. 《
Apple Patent | Techniques for displaying representations of physical items within three-dimensional environments(苹果专利:在三维环境中显示物理项目表示的技术)
》
在一个实施例中,专利描述的方法包括:在与一个或多个显示生成组件和一个或更多个输入设备通信的计算机系统处:经由所述一个或更多个显示生成器组件在三维环境中显示第一用户界面,其中所述第一用户界面包括与第一物理项对应的第一内容;在三维环境中显示包括与第一物理项对应的第一内容的第一用户界面的同时,经由一个或多个输入设备接收与第一内容对应的一个或更多个用户输入;以及响应于接收到与第一内容对应的一个或多个用户输入,经由一个或更多个显示生成组件在三维环境内和第一用户界面外显示第一物理项的表示。
27. 《
Apple Patent | Devices and methods for presenting system user interfaces in an extended reality environment(苹果专利:在扩展现实环境中呈现系统用户界面的设备和方法)
》
在一个实施例中,专利描述的方法包括:在经由显示生成组件显示由应用生成的扩展现实内容的同时,经由输入设备接收与调用第一类型操作的请求相对应的第一输入;响应于接收到第一输入:对应用的扩展现实内容的显示应用修改;以及经由显示生成组件显示系统用户界面,该系统用户界面包括用于执行第一类型的操作的第一组一个或多个用户界面对象。
28. 《
Apple Patent | Compositing of images from virtual and physical cameras(苹果专利:虚拟和物理camera图像的合成)
》
在一个实施例中,专利描述的设备可以包括处理器,处理器配置为确定物理camera在物理环境中的第一位置,将第一位置发送到第二设备,获得物理camera的元数据,并基于元数据修改第二设备的虚拟camera。所述处理器同时配置为从所述第二设备获得由放置在计算机生成环境中的第二位置处的虚拟相机捕获的至少一个虚拟图像帧,并从所述物理camera获得从所述实体环境捕获的至少另一个图像帧。所述处理器进一步配置为生成合成图像帧,所述合成图像帧包括与所述至少一个图像帧的至少一部分合成的至少一个虚像帧的至少部分,并显示合成图像帧。
29. 《
Apple Patent | Devices, methods, and graphical user interfaces forgenerating reminders for a user experience session in an extended reality environment(苹果专利:在扩展现实环境中为用户体验会话生成提醒的设备、方法和图形用户界面)
》
在一个实施例中,当用户体验会话处于活动状态时,计算机系统检测用户注意力方向的变化。响应于检测到用户注意力方向的变化,如果用户的注意力符合提醒标准,则计算机系统输出提醒以将注意力集中在用户体验会话上,如果用户注意力不符合提醒标准则放弃输出提醒。
30. 《
Apple Patent | Devices, methods, and graphical user interfaces for displaying content of physical locations(苹果专利:用于显示物理位置内容的设备、方法和图形用户界面)
》
在一个实施例中,计算机系统显示导航用户界面,导航用户界面包括第一位置体验的第一表示和具有第一方向的导航用户界面元素的第一部分,第一方向包括与第一位置体验相关联的第一兴趣点的第一表示。在一个实施例中,计算机系统将导航用户界面元素的显示从第一方向改变为与第一位置体验相对应的第二方向。在一个实施例中,计算机系统响应于与生成与物理位置相关联的内容集合的请求相对应的用户输入,显示与物理位置相关联的内容集合。
31. 《
Apple Patent | Systems and methods for managing display of participants in real-time communication sessions(苹果专利:用于管理实时通信会话中参与者显示的系统和方法)
》
在一个实施例中,计算机系统改变在计算机系统用户的模拟阈值距离内移动的参与者视觉表示的视觉外观。计算机系统根据模板排列用户的表示。计算机系统基于共享内容来排列用户的表示。计算机系统根据作为第一类型参与者的参与者的数量来改变参与者的空间排列。计算机系统改变实时通信会话的元素的空间排列以加入一组参与者。计算机系统促进与通信会话的参与者的空间表示组的交互。计算机系统便于基于参与者的空间分布来更新参与者的空间排列。
32. 《
Apple Patent | System state management in centralized rendering environment(苹果专利:集中式渲染环境中的系统状态管理)
》
在一个实施例中,专利描述的系统可以初始化三维环境的树结构。系统至少部分地基于树结构的遍历来渲染三维环境。系统识别改变第一或第二视觉状态的请求。系统可以确定对第一视觉状态的第一状态更新和对第二视觉状态的第二状态更新,并通过第一节点将第一状态更新传递给第一子节点并单独将第二状态升级传递给第二子节点来更新树结构。系统至少部分地基于对更新的树结构的遍历来重新渲染三维环境。
33. 《
Apple Patent | Devices, methods and graphical user interfaces for preview of computer-generated virtual objects for extended reality applications(苹果专利:用于扩展现实应用程序的计算机生成虚拟对象预览的设备、方法和图形用户界面)
》
在一个实施例中,内容预览包括基于对应用程序源代码的修改而更新的内容项的视觉预览。内容预览包括多个视口,每个视口都是独立可控。内容预览的每个视口都可以“暂停”,以防止视口因源代码的修改而更新,而与其他视口关联的内容预览则会随着源代码的更改而修改。这样,开发者在预览应用程序中开发内容时,可以直观地比较内容项的不同版本。设备与内容预览同时显示边界体积,以直观地描绘内容项的大小与与软件应用程序相关联的三维环境的三维大小之间的关系。
34. 《
Apple Patent | Devices, methods, and graphical user interfaces for viewing and interacting with three-dimensional environments(苹果专利:用于查看和与三维环境交互的设备、方法和图形用户界面)
》
在一个实施例中,当三维环境的视图可见时,计算机系统在三维环境中以第一方向显示用户界面对象,并在三维环境的第一阴影位置显示与用户界面对象对应的模拟阴影。第一阴影位置处的模拟阴影与用户界面对象具有第一空间关系。响应于检测到指向用户界面对象的用户输入,计算机系统将用户界面对象从第一方向改变为不同的第二方向。
35. 《
Apple Patent | Hands matting responsive to low light conditions(苹果专利:响应于低光条件的Hands Matting)
》
在一个实施例中,基于光照条件管理Hands Matting的方法包括接收包括手的图像数据,并确定图像数据中的亮度。如果第一图像数据中的亮度满足亮度阈值,则对图像数据执行Hands Matting以从图像数据中提取手,并且根据提取的手将图像数据与虚拟内容混合。如果第一图像数据中的亮度满足禁用阈值,则禁用Hands Matting,并且在不提取手的情况下将图像数据与虚拟内容混合。
36. 《
Apple Patent | Passthrough pipeline(苹果专利:透视管道)
》
在一个实施例中,专利描述的方法包括利用图像传感器捕获物理环境图像的第一部分;扭曲物理环境图像的第一部分以生成扭曲的第一部分;将扭曲的第一部分与虚拟内容的第一部分混合,以生成混合的第一部分;在显示器显示混合的第一部分;用图像传感器捕获物理环境图像的第二部分;扭曲物理环境的图像的第二部分以生成扭曲的第二部分;将扭曲的第二部分与虚拟内容的第二部份混合以产生混合的第二部分;在显示器显示混合的第二部分,
37. 《
Apple Patent | Method and device for refining a depth map(苹果专利:细化深度图的方法和设备)
》
在一个实施例中,专利描述的方法包括:使用图像传感器捕获物理环境的图像;获得第一深度图,所述第一深度图包括分别与所述物理环境的图像的多个像素相关联的多个深度;通过基于与所述物理环境的图像相关联的控制信号对齐所述第一深度图的一个或多个部分来生成第二深度图;使用所述一个或多个处理器基于所述第二深度图变换所述物理环境的图像;以及通过显示器显示变换后的图像。
38. 《
Apple Patent | Portal content for communication sessions(苹果专利:通信会话的传送门内容)
》
在一个实施例中,第一电子设备处的过程可以包括呈现第一3D环境的视图。可以获得表示第二3D环境的数据。可以确定基于表示第二3D环境的数据和第一3D环境内的视点的传送门内容。具有传送门内容的传送门可以显示在第一3D环境的视图中,其中传送门内容描绘了从视点通过传送门查看的第二3D环境的一部分。
39. 《
Apple Patent | Synthesized hand texture(苹果专利:合成的手部纹理)
》
在一个实施例中,专利描述的过程可以获得与代表用户手的至少两个不同部分的颜色相对应的至少两种肤色。作为响应,确定表示表示手的外观的颜色的空间排列的手纹理。可以基于至少两种肤色和手部纹理样本数据来确定手部纹理。所述过程同时可以包括确定与手的物理属性相关联的手结构,并且可以提供手结构和手纹理以用于生成手的3D表示。
40. 《
Apple Patent | Rendering layers with different perception quality(苹果专利:渲染具有不同感知质量的层)
》
在一个实施例中,显示图像的方法包括获得注视信息。基于注视信息获得第一分辨率函数和不同于第一分辨率函数的第二分辨率函数。基于第一虚拟内容和第一分辨率函数渲染第一层。基于第二虚拟内容和第二分辨率函数渲染第二层。将第一层和第二层合成为图像。在显示器显示图像。
41. 《
Apple Patent | Smooth video/image signal compression(苹果专利:平滑视频/图像信号压缩)
》
在一个实施例中,可以获得与3D内容的不同属性相对应的2D数据集。每个2D数据集可以提供公共2D坐标系内位置的属性值,坐标系将不同属性的属性值与3D内容的相应部分相关联。所述过程同时可以通过组合2D数据集来生成单个2D图像。对应于不同属性的属性值可以与单个2D图像组合。所述过程可以进一步将单个2D图像编码为用于传输或存储的专用格式。
42. 《
Apple Patent | System state management in centralized rendering environment(苹果专利:集中式渲染环境中的系统状态管理)
》
在一个实施例中,系统可以初始化三维环境的树结构。系统至少部分地基于树结构的遍历来渲染三维环境。系统识别改变第一或第二视觉状态的请求。系统可以确定对第一视觉状态的第一状态更新和对第二视觉状态的第二状态更新,并通过第一节点将第一状态更新传递给第一子节点并单独将第二状态升级传递给第二子节点来更新树结构。系统至少部分地基于对更新的树结构的遍历来重新渲染三维环境。
43. 《
Apple Patent | Estimating device pose using plane normal vectors(苹果专利:使用平面法向量估计设备姿态)
》
在一个实施例中,专利描述的方法包括从电子设备中的图像传感器获得与物理环境相对应的图像数据。电子设备可以基于图像数据确定表面法向频率数据。电子设备可以基于表面法线频率数据来确定电子设备在物理环境中的取向。
44. 《
Apple Patent | Methods and user interfaces for camera-based assessment of physical movement(苹果专利:基于camera的身体运动评估方法和用户界面)
》
在一个实施例中,一个或多个程序包括用于以下操作的指令:通过输出设备输出指导计算机系统的用户将camera放置在物理环境中的目标位置的指南;在确定camera满足一组一个或多个放置标准之后,通过camera捕获包括计算机系统用户的物理运动的图像数据。
45. 《
Apple Patent | Mixed reality recording of foveated display content systems and methods(苹果专利:注视点显示内容的混合现实记录系统和方法)
》
在一个实施例中,专利描述的系统可以包括用于显示图像帧的显示器,图像帧基于显示图像数据被划分为具有相应分辨率的区域。系统同时可以包括图像处理电路,用于基于多分辨率图像数据生成显示图像数据。生成记录图像数据可以包括获得指示区域之间的边界位置的边界数据,边界数据基于边界数据对多分辨率图像数据进行重采样。对多分辨率图像数据进行重采样可以包括对与第一区域对应的多分辨率图像的第一部分执行第一重采样,并对与第二区域对应的第二部分执行与第一重采样不同的第二重采样。
46. 《
Apple Patent | Digital assistant indicator appearance(苹果专利:数字助理指示灯外观)
》
在一个实施例中,专利描述的示例过程包括:在显示表示用户当前视场的XR环境的一部分时:用一个或多个传感器检测用户输入以调用数字助理;响应于检测到调用数字助理的用户输入,显示与数字助理相关联的用户界面元素;扭曲用户界面元素后面的当前视场的第一部分的显示;检测用户界面元素相对于当前视场的位置变化;以及扭曲用户界面元素后面的当前视场的第二部分的显示。
47. 《
Apple Patent | Privacy-protecting mixed reality recording(苹果专利:保护隐私的MR录制)
》
在一个实施例中,专利描述的框架用于保护混合现实和/或虚拟现实记录的隐私。电子设备上的第一进程可以从设备的第二进程接收视频流的帧。帧包括隐私敏感内容的指示符。第一过程可以至少部分地基于隐私敏感内容指示符来混淆帧的至少一部分。
48. 《
Apple Patent | Devices, methods, and graphical user interfaces for displaying views of physical locations(苹果专利:用于显示物理位置视图的设备、方法和图形用户界面)
》
在一个实施例中,计算机系统在三维环境中显示导航用户界面。导航用户界面包括以与第一物理位置的第一视图相对应的第一沉浸级别显示的一个或多个第一旅行用户界面元素。元素是可选择的,以将导航用户界面的显示从第一物理地点的第一视图改变为第二物理地点的第二视图。
49. 《
Apple Patent | Volumetric user interface layers for electronic devices(苹果专利:用于电子设备的体三维用户界面层)
》
在一个实施例中,体三维界面层可以是离散距离层,每个层与电子设备具有各自的距离,其中用户界面可以由电子设备显示。在电子设备上运行的应用程序可以具有请求在离散距离层之一中显示应用程序的用户界面的能力。在一个实施例中,离散距离层可以被语义标记,并且可以由应用程序使用它们的语义标签进行请求。
50. 《
Apple Patent | Application state management for electronic devices(苹果专利:用于电子设备的应用状态管理)
》
在一个实施例中,电子设备可以通过维护电子设备的物理环境的状态、监视在电子设备上运行的一个或多个应用程序的操作模式以及根据操作模式向一个或更多个应用程序提供物理环境状态的压缩更新来提供应用程序状态管理。在一个示例中,当应用程序返回到活动或前台模式时,电子设备可以向应用程序提供在应用程序处于后台模式时发生的压缩更新集。
51. 《
Apple Patent | Devices, methods, and graphical user interfaces for managing audio sources(苹果专利:用于管理音频源的设备、方法和图形用户界面)
》
在一个实施例中,专利描述的方法用于管理用于改变音频输出的控制,管理音频的突出度,基于距离管理音频输出,管理虚拟声场,在一个或多个位置输出音频,以及在一种或多种位置输出音频。
52. 《
Apple Patent | Multiview display of content items in a computer-generated environment(苹果专利:计算机生成环境中内容项的多视图显示)
》
在一个实施例中,可以在主屏幕和一个或多个次屏幕中显示和更新内容项。主屏幕和次屏幕可以呈现不同的内容项。观众可以提供输入以改变观看屏幕的大小和排列,改变在观看屏幕中显示的内容项,或改变屏幕(主要或次要)的指定。观众同时可以建立可以触发在屏幕中显示的内容项的自动更新标准。观众可以加入多用户通信会话,共同观看主屏幕和一个或多个次屏幕,同时保持对屏幕的控制。
53. 《
Apple Patent | Devices, methods, and graphical user interfaces for scrolling content(苹果专利:用于滚动内容的设备、方法和图形用户界面)
》
在一个实施例中,计算机系统最初响应于检测到第一输入而以降低的突出状态显示第一组控件,然后响应于检测出第二输入而以增加的突出状态显示第二组控件以这种方式,计算机系统可选地向用户提供反馈,表明他们已经开始调用控件的显示,而不会过度分散用户对内容的注意力。然后,基于检测到指示用户希望进一步与控件交互的用户输入,以视觉上更突出的方式来显示控件,以允许与计算机系统更容易、更准确的交互。
54. 《
Apple Patent | Devices, methods and graphical user interfaces for preview of computer-generated virtual objects for extended reality applications(苹果专利:用于扩展现实应用程序的计算机生成虚拟对象预览的设备、方法和图形用户界面)
》
在一个实施例中,内容预览包括基于对应用程序源代码的修改而更新的内容项的视觉预览。内容预览包括多个视口,每个视口都是独立可控。内容预览的每个视口都可以“暂停”,以防止视口因源代码的修改而更新,而与其他视口关联的内容预览则会随着源代码的更改而修改。这样,开发者在预览应用程序中开发内容时,可以直观地比较内容项的不同版本。设备与内容预览同时显示边界体积,以直观地描绘内容项的大小与与软件应用程序相关联的三维环境的三维大小之间的关系。
55. 《
Apple Patent | Techniques for three-dimensional environments(苹果专利:用于三维环境的技术)
》
在一个实施例中,专利描述的方法包括:从应用程序接收在三维环境中的第一位置添加二维实体的请求,其中3D环境包括一个或多个3D实体;以及响应于接收到在3D环境中的第一位置添加2D实体的请求:将第一3D实体添加到3D环境中第一位置;通过2D框架渲染2D实体的表示;以及通过以下步骤经由3D框架渲染第二3D实体的表示:对2D实体的表示执行一个或多个操作;以及将第二3D实体的表示放置在第一位置。
56. 《
Apple Patent | Devices, methods, and graphical user interfaces for managing the display of an overlay(苹果专利:用于管理叠加显示的设备、方法和图形用户界面)
》
在一个实施例中,专利描述的方法包括:检测显示用户界面区域的用户界面叠加的请求;以及响应于检测到显示用户界面叠加的请求,基于锚元素在用户界面区域内的位置,经由显示生成组件显示相对于用户界面区域的用户界面叠加。
57. 《
Apple Patent | Devices, methods, and graphical user interfaces for presenting content(苹果专利:用于呈现内容的设备、方法和图形用户界面)
》
在一个实施例中,专利描述的方法包括:在与一个或多个显示生成组件和一个或一个以上输入设备通信的计算机系统处:经由所述一个或更多显示生成组件在第一显示位置显示多个对象中的第一对象;在显示第一对象的同时,经由一个或多个输入设备检测与在多个对象内导航的用户请求相对应的第一用户输入;以及响应于检测到第一用户输入:经由一个或多个显示生成组件显示第一对象从第一显示位置到不同于第一显示位置的第二显示位置的移动,同时通过修改第一对象相对于显示第一对象的背景的不透明度来降低第一对象的视觉突出度。
58. 《
Apple Patent | Devices, methods, and graphical user interfaces for content collaboration and sharing(苹果专利:用于内容协作和共享的设备、方法和图形用户界面)
》
在一个实施例中,专利描述的方法包括:在与一个或多个显示生成组件和一个或更多个输入设备通信的计算机系统处:当计算机系统与两个或更多参与者处于协作会话中时,其中协作会话包括配置为由两个或更多参与者在协作会话中编辑的内容,并且其中计算机系统与协作会话的第一参与者相关联;当计算机系统处于协作会话的一个第一模式时:通过一个或一个以上显示生成组件显示内容的第一视图,其中内容的第一视图由协作会话中的两个或以上参与者共享。
59. 《
Apple Patent | Devices, methods, and graphical user interfaces for real-time communication(苹果专利:用于实时通信的设备、方法和图形用户界面)
》
在一个实施例中,专利描述的方法包括:在与一个或多个显示生成组件通信的计算机系统上:通过一个或更多个显示生成部件并在三维环境中显示实时通信用户界面,实时通信用户接口对应于计算机系统的用户与实时通信会话中与计算机系统的不同用户之间的实时通信会话;以及经由所述一个或多个显示生成组件显示所述实时通信会话中的一个或更多个参与者中的第一参与者的第一空间受限表示。
60. 《
Apple Patent | Devices, methods, and graphical user interfaces for detecting inputs(苹果专利:用于检测输入的设备、方法和图形用户界面)
》
在一个实施例中,专利描述的方法包括:检测用户的一部分相对于三维环境执行的输入;以及响应于检测到所述输入:根据所述输入是在相对于所述三维环境的第一位置处执行的确定,基于所述输入执行操作;并且根据在三维环境中的第二位置执行输入的确定,其中第二位置不同于第一位置,放弃基于输入执行操作。
61. 《
Apple Patent | Indirect motion mapping pipeline and pinch centroid(苹果专利:间接运动映射管道和捏合质心)
》
在一个实施例中,处理手势输入包括从一个或多个传感器获得手的手追踪数据,其中手在手追踪数据中执行捏合,根据手追踪数据确定手的手位置和手方向,基于手方向应用与手位置的预定义偏移以确定捏合质心,以及基于捏合质心确定输入位置。捏合质心用于间接运动映射管道中,以基于用户运动确定用户输入的特征。
62. 《
Apple Patent | Active and inactive mode transitions for user input(苹果专利:用户输入的活动和非活动模式转换)
》
在一个实施例中,处理手势输入包括基于一个或多个摄像头帧获得第一只手的手追踪数据,基于手追踪数据检测第二手的第一输入手势,以及确定第一只手是否处于活动状态。根据第一只手处于活动状态的确定,启动与第一手势相关联的输入动作。如果在手处于活动状态时,确定满足非活动标准,则第一只手转换为非活动状态。
63. 《
Apple Patent | Pinch recognition using finger zones(苹果专利:使用手指区域进行捏手识别)
》
在一个实施例中,启用手势输入包括基于一个或多个摄像头帧获得手追踪数据,基于手追踪数据检测第一手指和第二手指之间的接触事件,以及确定第一手指上的第一接触位置和第二手手指上的第二接触位置。根据第一接触位置和第二接触位置在第一手势的第一预定义手势区域内的确定,启用与第一手势相对应的输入动作。
64. 《
Apple Patent | Input recognition based on distinguishing direct and indirect user interactions(苹果专利:基于区分直接和间接用户交互的输入识别)
》
在一个实施例中,专利描述的方法包括将用户活动解释为与位于3D空间内的用户界面元素的用户交互的设备、系统和方法。系统允许用户与在利用替代输入方式的3D环境中显示的虚拟元素进行交互,例如,将用户活动解释为与虚拟元素的直接交互或间接交互的XR环境。
65. 《
Apple Patent | Creation of optimal working, learning, and resting environments on electronic devices(苹果专利:在电子设备上创造最佳的工作、学习和休息环境)
》
在一个实施例中,可以基于关于用户身体的数据(例如面部表情、手部动作、生理数据等)识别用户的认知状态(例如工作、学习、休息等),并用周围环境更新环境,以促进用户对活动的认知状态。
66. 《
Apple Patent | Content brightness and tint adjustment(苹果专利:内容亮度和色调调节)
》
在一个实施例中,可以基于确定观看状态来调整亮度特性。观看状态,例如用户在通过头显观看XR环境视图时的眼睛感知/适应状态,可能会对用户看到的XR环境的亮度特性做出响应,而所述亮度特性不一定是视图全部或部分基于的物理环境的亮度特征。
67. 《
Apple Patent | Input recognition system that preserves user privacy(苹果专利:保护用户隐私的输入识别系统)
》
在一个实施例中,专利描述的架构在系统或共享仿真区域中接收应用程序UI几何图形,并输出交互事件数据。OS进程可以被配置为提供输入支持进程,以支持识别旨在用于一个或多个单独执行的应用程序的输入,例如,通过提供特定输入识别任务来识别用户活动作为应用程序的输出。
68. 《
Apple Patent | Input recognition in 3d environments(苹果专利: 3D环境中的输入识别)
》
在一个实施例中,系统允许用户与在利用替代输入方式的3D环境中显示的虚拟元素进行交互,例如,将用户活动解释为与虚拟元素的直接交互或间接交互的XR环境。
69. 《
Apple Patent | Eye tracking loss mitigations(苹果专利:眼动追踪丢失缓解)
》
在一个实施例中,可以捕获3D区域的传感器数据;基于追踪眼睛的3D位置来生成包括眼睛3D位置的眼睛追踪数据;可以基于捕获的传感器数据随时间更新3D位置;基于捕获的传感器数据检测干扰更新眼睛3D位置的条件;使用眼睛的平滑3D位置来更新眼睛追踪数据;平滑的3D位置可以基于先前追踪的眼睛部分的3D位置和基于当前传感器数据确定的眼睛部分当前的3D位置来确定。
70. 《
Apple Patent | Dynamic proximity boundary for detecting proximate objects(苹果专利:用于检测邻近对象的动态接近边界)
》
在一个实施例中,基于与障碍物的接近程度提供视觉治疗包括由设备收集环境的传感器数据,并确定设备的速度。基于速度确定设备周围体积的边界。如果基于传感器数据在边界内检测到物理对象,则启动通知程序。体积的边界随着设备或用户速度的变化而动态变化。
71. 《
Apple Patent | Multimode cursor movement(苹果专利:多模式光标移动)
》
在一个实施例中,可以包括呈现包括虚拟元素和光标的XR环境。获得与手在3D环境中的3D移动相对应的手数据。在第一模式下操作,在该模式下,手的3D运动被转换为2D运动,并检测3D用户输入标准。响应于3D用户输入的标准,操作模式修改为第二模式,在第二模式下,在不转换为2D运动的情况下保持手的3D动作。
72. 《
Apple Patent | Pressure-controlled face engagement(苹果专利:压力控制面部接合)
》
在一个实施例中,专利描述的可穿戴电子设备可以包括光密封件,以舒适地贴合用户的面部并排除外部环境的光线。光密封件可以包括一个或多个气囊,并根据需要贴合使用者的面部。一个或多个气囊可以包括阀,当气囊内的压力超过阈值时,阀从气囊中释放空气。这种释放可以缓冲用户免受施加到可穿戴电子设备的外力。气囊可以具有不同的配置,从而为用户面部更敏感的区域提供更大的缓解。
73. 《
Apple Patent | Devices with detachable headbands(苹果专利:带可拆卸头带的设备)
》
在一个实施例中,头戴式设备可以具有包含后向显示器的头戴式外壳,当用户佩戴头戴式壳体时,后向显示器为用户显示图像。头戴式设备外壳可以具有外壳结构,例如具有突出柱的细长外壳构件。多个头带可以在突出柱处可拆卸地连接到头戴式设备外壳。可以提供可释放的闩锁,以允许头带和外壳之间的选择性接合和脱离。
74. 《
Apple Patent | Head-mounted display uni