Apple拿到一项全新手势控制系统专利,这套方案旨在让电子设备的交互逻辑更加自然、适配使用者习惯,同时拥有更快的响应速度,可以精准区分不同手部动作,识别使用者身份,并结合设备当下运行状态解读手势指令。
这项技术最值得关注的设计,是能够区分仅用于预览内容的手势和直接执行操作的手势,未来有机会落地在Apple TV、Apple Vision Pro、Apple Watch以及其他支持无接触交互的产品之上。
这套方案不需要用户记忆大量复杂手势或是在多层菜单之间反复切换,依靠为数不多的手部动作,结合手势的方向、速度、持续时长以及当前使用场景,就可以触发不同功能。
这套智能手势识别系统的核心,是捕捉手势之间细微的差别,包括滑动、轻弹、轻点、捏合,以及握拳再张开这类连贯动作,依靠摄像头、深度传感器等组件完成识别,全程不需要触碰屏幕或者操控配件。
系统不只是单纯判断手势是否出现,还会综合分析手势的执行方式、操作人身份,结合当下场景判断最合适的响应动作,短促的手指动作可以直接执行指令,而同方向、动作更舒缓的长手势,则用来浏览内容,不会打断正在运行的任务,这一点在媒体播放场景尤为实用,能够避免误触切歌、中断视频播放的问题,专利权利要求也专门提到,定向手势可以在音频持续播放的前提下,前后浏览内容。
音乐控制是专利里十分直观的应用示例,短促的轻弹手势会直接切换曲目,同步更新界面,而更长的滑动手势则是另一种逻辑,设备不会立刻切歌,只是展示其他曲目信息,保持当前音频持续播放,把内容浏览和播放执行分离开,用户可以自由翻看前后曲目而不打断正在收听的内容,界面还会跟随手势持续刷新,根据滑动距离浏览多首内容,这套交互模式可以给Apple TV等媒体设备带来新的操控方式,摆脱传统遥控器的限制。
个性化识别也是这项技术的一大亮点,系统可以把手势和使用者一一绑定,在展示照片的场景里,第一位用户做出隔空轻点的手势,设备会切换下一张照片,而另一位用户做出完全一样的手势,设备则会调低屏幕亮度,两位用户也可以设置不同手势来完成同一个操作,有人用轻点选中控件,有人用捏合实现相同指令,在多人共用的居家设备场景里,这套自定义机制可以适配不同家庭成员的使用偏好。系统还能够区分已登记用户和陌生人,部分功能仅对指定人员开放,增加一层操作权限管控。
手势的响应逻辑还会跟随设备运行状态变化,同一个手势在低功耗待机和正常工作模式下,触发效果并不相同,例如握拳再张开的动作,在待机状态下可以唤醒设备并调出界面,设备激活之后再做出这个手势,则会触发画面缩小预览的操作,不必为每一项功能单独记忆一套手势。
设备休眠时,传感器还可以切换至低功耗模式,在不全部满载运行的前提下检测手势,降低待机功耗。
这项专利体现出Apple持续跳出触屏、键盘、遥控器这类传统交互载体的研发方向,覆盖手机、智能手表、头戴设备、电视以及各类智能家居配件,其中最具落地潜力的场景集中在媒体浏览和空间计算领域。
对于Apple Vision Pro以及后续的智能眼镜,区分浏览动作和确认指令的能力,能够大幅提升手势交互的实用性;对于Apple TV和智能家居设备,个性化手势也可以为不同家庭成员提供定制化操控方案。
这份专利的核心价值,在于将手势识别与场景感知结合在一起,尤其是在不中断播放的前提下浏览媒体,以及根据使用者、设备状态差异化解读同一手势,这套技术思路,将推动设备交互朝着更贴合使用者意图的方向演进,让设备不再只是简单识别手部动作,而是读懂用户想要完成的操作。
