Apple获批一项全新专利,提出一套设备手部交互管控技术,通过可随用户行为自动调整的动态交互感应区域,智能判定设备何时、以何种方式识别用户手部动作。
这份专利文件虽明确覆盖Vision Pro这类扩展现实头戴设备,同时也适用于MacBook、iPhone、iPad等搭载摄像头或手部追踪传感器的产品。核心设计思路是:不再把所有手部动作都视作有效操作指令,而是划定一块虚拟边界,也就是界面交互感应区,只有进入该区域的手势,才会被判定为用户主动交互意图。
当手部抬升至设定高度、进入感应区域后,设备随即进入就绪状态,开始监测并识别操作指令;若手部落下、静止不动,设备则退出就绪状态,同时可自动调整或隐藏界面相关控件。
这项专利的核心突破在于,交互感应区域并非固定不变。专利设定感应高度阈值可根据用户行为、使用场景、周边环境实时动态偏移。若系统检测到用户手部放在桌面或腿上,会自动上调感应区域下边界,用户无需大幅度抬手就能重新触发交互;若手部放置位置低于原有感应区间,边界也会随之自动下调。
感应区域还能依据人体姿态、界面灵敏度设置、手部是否握持物品、视线朝向等多重参考维度进行适配,综合计算得出交互活跃度分值。分值达到设定标准后,设备才正式开启界面交互模式,将手部动作纳入指令识别范围。
另一项关键特性是跨设备通用适配。专利适用范畴涵盖头戴设备、投影设备、平视显示设备、iPhone、iPad以及MacBook。
对Vision Pro而言,该感应区域可以区分用户抬手操控虚拟物件,和单纯自然垂手休息两种状态;对搭载摄像头的MacBook与iPad,能有效避免用户打字、手部自然放置时,误触发光标移动或点击操作。系统仅在手部进入感应区间时,才显示菜单、光标等交互控件,减少界面冗余,同时规避误操作。
设备依托图像传感器、深度传感器或动作传感器追踪手部位置,测算手部相对地面、人体、显示屏或承载平面的实时高度。当高度落在设定上下边界区间内,设备进入界面交互就绪状态,开始识别手势与视线指令。
处于就绪状态期间,系统持续监测手部动态。若手部长时间无动作、保持放松姿态或放置在平面上,设备会退出就绪模式,并同步调整感应区域边界。例如手部静置在原本感应区间内的桌面时,系统会把下边界上调至手部上方,用户只需小幅抬手即可再次触发交互。
专利还纳入高度以外的多维度判定逻辑:是否注视操作界面、当前运行应用类型、手部与感应区距离、手部朝向、手中是否持有物品等。各项因素加权计算生成交互分值,让交互判定不再是简单的抬手、落手二元判断,识别逻辑更细腻智能。
对于扩展现实头戴设备来说,摄像模组会捕捉全部手部画面,误触发一直是行业痛点。Vision Pro目前已采用视线配合捏合手势的交互方式,而动态感应区域能够大幅降低手部自然放松时的误识别概率。
对iPhone、iPad和Mac设备,借助前置摄像头划定专属交互空间,无需额外专用传感器,就能实现更稳定的隔空手势、悬浮触控交互体验。同时也为跨设备协同交互埋下伏笔:同一套交互判定逻辑可在全品类设备通用,在MacBook前抬手触发的系统行为,与在Vision Pro中抬手交互的逻辑保持一致。
专利获批并不代表相关功能一定会正式上线量产,但足以看出Apple正在持续优化设备识别手部交互的判定规则。通过打造具备场景感知、可自适应调整的动态感应区域,Apple旨在让手势操控更贴合用户真实意图、操作门槛更低,无论佩戴头戴设备,还是对着笔记本隔空操作,都能获得自然流畅的交互体验。

