苹果AR眼镜新专利:可使用手势控制UI并与设备进行交互

2020-12-29 18:10:38来源:VR陀螺


编译/VR陀螺

上周,美国专利商标局发布了苹果公司的一项专利申请,该专利申请与他们未来的增强现实眼镜有关,它将为用户提供仅在佩戴AR眼镜时才能看到的信息。例如,将向参观博物馆的用户显示有关仅使用苹果的AR眼镜可见的绘画或雕塑的信息。在另一个示例中,影院大厅中的海报可以呈现即将上映的电影,海报可能包含AR眼镜可见的电影预告片等信息。专利的另一方面涉及到苹果的AR眼镜如何与手势一起工作。

无我VR 聚合新闻

苹果在专利中指出,采用光学方案的透明HMD作为可穿戴眼镜提供给用户,且每只眼睛都具有单独的透明镜片。

苹果正在申请专利的发明着重于详细说明手势的使用,因为手势是用户能够与AppleGlasses交互的方式之一。

从总体上看,苹果的发明涵盖了用于提供计算机生成的现实(CGR)内容的设备、系统和方法,其中包括基于特定检测到的物体(例如用户的手)的表面显示的虚拟内容。

结合物理环境可以看到虚拟内容,通过在相对于具有特征的表面上的位置选择性地显示虚拟内容,可以提高虚拟内容在这些和其他情况下的可见性,所述特征具有可以使虚拟内容更容易看到或理解的特征。例如,在相对一致且平坦的用户手的表面上显示虚拟内容可以比在可变颜色的树和移动的叶子的前面更容易让用户看到虚拟对象。

一些实施方式使用位于HMD处或与HMD通信的传感器来检测和跟踪相对于HMD的手的位置。在各种实施方式中,检测和跟踪手的位置涉及将手的颜色或手模型与深度图等相关连,以检测和跟踪手的形状以及相对于HMD的姿势(例如,姿势和位置)。

苹果的专利非常详细地介绍了如何使用手势与眼镜进行通信。苹果指出:“在某些实现中,手势可用于启动或终止在用户手上显示虚拟内容的HMD。例如,顺时针或逆时针旋转闭合的拳头可打开或关闭显示。

在一些实现中,用户可以基于物理环境来控制(例如,允许或阻止)在HMD用户手上的可用虚拟内容的显示(例如,购物时显示广告或观光时显示博物馆历史信息)。

在一些实施方式中,用户可以基于物理环境控制,选择将可用虚拟内容显示在用户的手上。例如,当沿着街道行走时,仅允许在用户的手上显示针对食品或餐馆的广告。

在一些实施方式中,HMD用户可见的单个CGR虚拟内容可以根据需要进行操纵。例如,选择让原本在HMD处可见的虚拟内容在用户的手上重新显示。例如,用左手“抓取”可见虚拟内容,并放置在用户的右手处重新显示该虚拟内容。

用户可以查看并以其他方式体验基于CGR的用户界面,该界面允许用户通过手势、语音命令、输入设备等,基于虚拟内容位置来选择、放置、移动以及以其他方式呈现CGR环境等。

某些通信可以显示在用户的手掌上。在专利附图中提到的一种情况中,在下面的图4A和4B中,我们看到用户能够使用用户手中的卡进行通信。

如图1所示,在图4A中,在物理环境#405中描绘了对象#414和保持该对象的用户的手臂#410(可以在其中检测)。如图4B所示,在CGR环境#430中,虚拟内容#470在可以显示在用户面前。

无我VR 聚合新闻

在一示例中,虚拟内容可以标识或提供关于物理环境中的某物的信息。在另一个示例中,虚拟内容可以涉及与物理环境无关的事物。

苹果的专利图5是示出根据一些实现的确定当前物理环境中的合适背景条件或背景位置以在CGR环境中覆盖虚拟内容的示例性方法的流程图。除了专注于使用用户的手势之外,苹果还添加了“可能会使用其视觉、声音、触觉、味觉和嗅觉中的任何一种来感知CGR对象和/或与之交互。例如,一个人可能会感知创建3D或空间音频环境的音频对象并与之交互,可以感知3D空间中的点音频源。但苹果公司未能详细说明“音频对象”的实际含义。

无我VR 聚合新闻

如果对AppleGlasses感兴趣,可以查阅苹果的专利20200401804(标题为“基于检测到的物体的虚拟内容定位”),专利中有很多值得探讨的细节。苹果的这项专利已于上周四由美国专利商标局发布。考虑到这是一项专利申请,目前尚不知道这种产品上市的时间。

这项专利的发明者包括:

AnselmGrundhöfer:工程经理,在加入苹果之前,Grundhöfer在迪士尼工作了7年,并担任首席研究工程师以及投影技术负责人

RahulNair:原型工程师

来源:patentlyapple

新闻媒体更多>>
  • VR网
  • Yivian
  • 青亭网
  • 麦逗VR
  • VR陀螺
  • 魔多VR