「模组」苹果AR专利:结合iPhone深度模组为AR头显提供手势追踪支持


近期 , 美国专利商标局公布了苹果一项与AR头显相关专利 , 专利中指出了一种结合iPhone/iPad设备实现的3D隔空手势识别方案 。
【「模组」苹果AR专利:结合iPhone深度模组为AR头显提供手势追踪支持】
「模组」苹果AR专利:结合iPhone深度模组为AR头显提供手势追踪支持
本文插图

据了解 , 专利中描述的方案首先利用iPhone/iPad的深度模组和图像算法识别用户手部的3D模型 , 并实时更新和传输3D手部数据给AR头显 , 头显的深度模组则根据移动设备识别到的3D手部模型来进行手势追踪 , 识别不同的手势 。
专利中还写道 , 即使手指触碰表面时产生遮挡 , 也可以识别手部的深度模型 , 可结合表面的数据和深度数据来优化3D模型的精准度 。 此外 , 也可以使用ICP算法(迭代最近点算法)、轮廓对齐算法等 , 结合移动设备和头显所识别的多个传感数据 , 来提升手势识别效果 , 完成遮挡数据修补 。
应用方面 , 苹果表示:隔空手势不仅可以用于AR交互 , 也可以用于账户认证等场景 。
值得注意的是 , 专利中提到的深度模组已经在2020年款iPad Pro中得到应用 , 其搭载了一个包含LiDAR激光雷达的dToF深度模组 , 支持更强大的3D识别能力 。 甚至 , 多种信息显示下一代iPhone也将搭载同样的dToF模组 。 如此一来 , 苹果设备很有可能支持隔空手势识别 , 同样也为未来与AR头显搭配使用打好了基础 。


    推荐阅读