煕煕姸姸
26-11-06 00:00 微博认证:数码博主 超话小主持人(Apple超话)

Apple昨日拿到一项获批专利,这套先进手势识别系统能够读懂用户意图,在多设备共存的环境里,判定隔空手势究竟要操控哪一台电子设备,解决智能家居生态长期面临的交互难题,当多台设备同时捕捉到相同手势指令时,不再同步触发、出现响应错乱。

这项交互方案拥有广阔的落地空间,可以嵌入整套Apple生态,覆盖Vision Pro、Apple Watch、iPhone以及各类智能家居配件,工程师设想,用户不必反复切换应用或是一次次指定目标设备,系统可以先识别一次定向交互,之后把后续所有隔空手势定向发送到选定设备。

随着手势操控逐步成为空间计算场景里重要的输入方式,如何区分手势的接收主体,已经成为一道棘手的工程难题,如果用户站在两块智能显示屏之间横向挥手切换画面,缺少上下文判定机制的情况下,两台设备会同时接收这条指令,引发交互混乱。

Apple的方案给出了解决路径,系统会先捕捉一次绑定目标的初始输入,再解析后续的隔空手势,这次初始确认可以是触碰设备本体、朝设备指向、注视设备达到指定时长,或是通过语音说出目标名称,一旦锁定用户想要操控的对象,之后的手势动作都会绑定这台设备执行。

专利当中给出示例,两台屏幕各自展示不同照片,用户触碰第一台设备之后向右隔空滑动,只有这台设备切换图片,另一台保持原有画面不变,如果用户转而触碰第二台设备,重复同样的挥手动作,指令就会切换流向,整套思路把设备选择和手势执行拆成两个独立环节,相同的手部动作,能够依照目标不同产出对应的反馈。

这项设计的核心亮点之一,是引入临时手势授权模式,用户选定设备之后,会开启一段识别窗口期,时长大约落在1至20秒,窗口期之内连续做出的手势都会自动发送给选定设备,用户可以连贯下达多条指令,不需要反复确认目标,比如选定显示屏之后,依靠一连串隔空翻页浏览图集。

专利同时提供另一套实现逻辑,单次定向操作只授权一条手势,想要继续操控就必须重新发起确认,系统还能够区分不同手势类型,部分特定动作可以永久绑定指定设备,不受上一次选定目标的影响。

还加入身份校验环节,部分版本会比对最初选定设备的使用者与做出手势的人,避免环境里其他人随手挥动,意外触发设备功能。

这套交互框架并不局限于显示设备,还可以延伸到全屋智能配件,专利列举了两组独立控制的智能灯具,用户触碰其中一盏灯对应的墙面开关之后,隔空手势就可以单独调整这盏灯的色温与亮度,不会干扰旁边另一台照明设备,初始触碰动作负责锁定目标,后续手势执行和原生开关不一样的功能,原本用来通断电源的墙面按键,可以标记灯具,再由隔空手势调节色彩,手势最终效果还会适配硬件本身能力,同样一个挥动动作,在支持调色的灯具上切换色温,放到仅能调节亮度的灯具上,就会改为控制明暗。

这套逻辑同样适用于电视与遥控器,按下实体按键确立目标之后,隔空手势就能用来调音量、切换频道,完成传统遥控的大部分操作。

可穿戴设备在这套体系里承担着手势控制器的角色,搭载多颗摄像头的头显能够捕捉手部动作,识别手势之后向周边实体设备转发指令,让Vision Pro成为打通物理环境的交互入口,Apple Watch同样被纳入方案,依靠内置陀螺仪感知手腕动作,把手势语义传递给iPhone或是其它负责执行指令的联网终端。

整套系统采用分布式运算架构,摄像头、各类传感器、智能手机以及配件协同参与手势识别与目标判定,依托Wi‑Fi、蓝牙、Thread、超宽带等无线协议完成通信,方便这套手势体系无缝融入已经成型的互联家居环境。

这项专利的长远价值,在于搭建一套更加自然的跨设备交互范式,不再孤立解读每一次挥手动作,而是结合上下文、使用者身份、选定目标与时间窗口,共同判断用户想要完成的操作,随着Apple在空间计算、穿戴交互与复杂智能家居赛道持续布局,这套机制的作用会愈发凸显。

依靠上下文让熟悉的手势适配不同硬件,工程师正在慢慢降低日常操控对触屏、实体遥控器以及应用菜单的依赖,指向一个全新的生态图景,挑选设备、隔空操控,融合成一套流畅连贯的交互体验。

需要留意的是,专利获批不等于功能很快推向量产,代表Apple在为未来空间交互储备技术方案,后续能否落地、落地之后覆盖哪些机型,依旧存在变数。

发布于 浙江