Apple与卡内基梅隆大学联合获批一项全新专利,提出一种可通过腕戴设备持续追踪手部姿态的创新方案,全程无需摄像头。这套技术思路与Meta Neural手环有相似之处,但这份联合专利在技术层面实现了全方位升级。
该方案在手腕附近搭载一根或多根天线,通过检测手部姿态变化引发的天线阻抗特征波动,将采集到的信号输入机器学习模型,以此推算用户实时手部姿态。
这项设计的突破性在于,天线不再仅作为通信元件,同时承担传感功能:用户张开手掌、拇指与食指捏合、握拳、转动手腕或是做出细微手指动作时,手与手腕的外形会改变天线周边电场环境,进而偏移天线自谐振频率,改变回波损耗、相位、复阻抗等检测数值。
简单来说,这款腕戴设备不需要看见手部,而是通过电场变化感知手部动作带来的电气特征改变。
专利将该发明定位为光学手部姿态追踪的替代方案。现有腕部追踪设备多依靠RGB摄像头、热成像相机或测距传感器,但这类技术极易被遮挡干扰:衣袖、手套、手部自身角度或其他物体都会挡住镜头视野。
Apple与卡内基梅隆大学同时指出光学方案的隐私缺陷:腕部摄像头会拍摄周边环境,容易让使用者与身边人群产生不适感。而基于天线阻抗的传感方案完全规避图像采集,仅依靠电气数据推算手部姿态,不存在画面泄露风险。
这也是本专利最核心的亮点:即便手部被布料完全遮盖,设备依旧能稳定追踪手部动作,全程无需镜头对准手掌或周边环境。
专利将该技术定义为负载式电场传感:天线辐射元件贴近人体佩戴,与人体形成电容耦合,用户手腕、手掌相当于天线的接地平面。
手部姿态改变时,耦合接地平面的外形同步变化,直接影响天线自谐振频率与阻抗表现。设备持续采集频率对应的回波损耗幅值、相移,部分方案还会检测复阻抗幅值与相位偏移,将所有测量数据提取特征后送入机器学习模型。
核心逻辑是:不同手部姿态会产生独一无二的信号特征,摊开手掌、捏指、握拳对应的回波损耗与相位偏移数据均存在明显区分度,设备依靠这些特征实现不间断手部追踪。
该技术不依靠简单数值阈值判断动作,整套数据处理链路会从天线测量数据中提取多维特征:计算一阶导数、回波损耗峰值、均值、极值、标准差等参数,整合为特征向量输入模型,同时结合多帧特征数据提升手部姿态推算精度。
模型最终可输出完整三维手部姿态网格模型;同时支持两自由度手腕倾角追踪、高精度手指微动作识别。它不局限于识别少数固定静态手势,核心目标是实现连续、流畅的手部动作捕捉。
专利规划了三类交互输入模式:
三维手部姿态连续追踪:
模型输出手部全部关节关键点,驱动完整3D手部网格;
两自由度手腕角度识别:
捕捉手腕俯仰、左右偏转动作;
手指微手势识别:
精准判断拇指与其余手指的相对位置。
第三类微手势对穿戴设备意义重大:用户无需抬起手臂、触碰屏幕,就能完成细微手指操作。专利举例包含空中悬停触控、指尖轻点、拇指食指模拟滑动条调节等交互。
落地后,智能手表等腕戴设备可识别佩戴手的隐蔽细微手势,适配空间交互、头显操控、无障碍辅助、手语识别、场景智能感知、私密穿戴快捷指令等场景。
专利测试了多种天线拓扑结构:单极天线、三叶草天线、塔形天线、折叠圆柱螺旋天线。不同结构的辐射范围、对人体耦合电场变化的灵敏度各不相同。
实测中四款天线都能精准区分静态手部姿态:单极天线机器学习表现优异,但纵向高度过高,不符合穿戴设备轻薄需求;三叶草天线兼顾紧凑体积与清晰信号差异,是商用落地最优选择。
专利同时测试手腕不同佩戴点位:正面位置对各类手部动作的信号反馈最丰富,传感效果最优;可在手腕背部、侧后方增设第二根天线,扩大传感覆盖范围。
专利包含双天线乃至多天线方案,可搭配不同拓扑、谐振频率、极化方式、辐射方向、品质因数的天线,也可采用分布式阵列、反向辐射天线组合。
这种设计适配不同用户的手型、腕围,以及设备佩戴松紧差异。多天线系统能采集更丰富的传感数据,区分更多手部姿态与动作,同时抵消佩戴偏移、周边导电物体带来的信号干扰。
该技术可集成进智能手表整机,通过片上系统、系统级封装芯片实现;也能将柔性印刷天线做进表带,电路模组安置在表体内部。
这份专利并非新品预告,但直接指向Apple穿戴、空间计算交互的核心发展方向。Apple生态越来越依赖自然交互方式:触控、语音、视线追踪、手势、生物传感,而手部姿态追踪是空间交互的关键——双手是选择、操控虚拟数字物体最直观的载体。
传统镜头追踪存在天然短板:头显摄像头仅能捕捉视野内的手部,手部被遮挡便失效;腕部光学方案又存在隐私、视线遮挡问题。天线阻抗传感开辟了全新路线,即便手部被遮盖、脱离镜头视野,依旧能持续捕捉动作。
腕戴设备还可与头戴设备形成互补:头显捕捉用户视线与视野,手表捕捉细微手指、手腕动作,两套系统配合实现更稳定、隐私性更强的空间交互。
无镜头传感方案:
首次将腕部天线阻抗特征作为手部姿态传感器,无需摄像头、数据手套、外部信标、视觉标记,仅依靠手部外形改变带来的电磁信号变化完成追踪;
隐私优势突出:
全程不采集手部、环境图像,规避镜头带来的隐私争议,更适合日常长期佩戴;
超越静态手势识别:
支持完整3D手部连续追踪、手腕转动、高精度微手势,可覆盖空间计算、无障碍工具、手语识别、手表快捷操控等多类场景。
专利也客观列出落地难点:设备佩戴松紧、用户手型差异、周边导电物体都会干扰天线阻抗数值。专利提出可在每次使用前完成设备校准,抵消个体差异影响。
优化方案包含定向天线(信号向手部定向辐射,减少无用外溢辐射)、多拓扑天线组合、增设多根传感天线提升精度。可见该技术并非纯理论设想,充分考虑了穿戴产品佩戴适配、校准、人体差异、环境干扰等现实问题。
这份Apple与卡内基梅隆大学的联合专利,描绘了穿戴设备的全新形态:未来手表不止检测运动、触控,更能感知整只手的外形与动作。依靠天线捕捉手部改变的电磁场,普通智能手表即可变身手势传感终端。
这将极大拓展穿戴计算的能力边界:手腕位置天然适合间接观测手部行为,无需摄像头就能推算手指姿态、手腕角度、细微手势,打造一套私密、随时可用的输入体系,适配手机、头显、智能眼镜、智能家居、无障碍辅助工具。
核心结论:Apple联合高校正在研发一套完全脱离摄像头、依靠电场传感的手部追踪方案。下一代空间计算、穿戴交互需要隐蔽、稳定、隐私友好、适配日常佩戴的输入方式,而这项专利证明,手表里不起眼的天线将不再只是无线通信零件,还会成为全新的手部动作传感器。
