驾驶员状态监测系统(DMS)的核心原理,是通过多模态传感融合实时捕捉驾驶员的生理信号与行为特征,再经算法评估其疲劳、分心或健康状态,进而触发分级提醒或车辆控制干预。

  一、感知层:多通道采集驾驶员状态信号

  视觉感知:利用车内摄像头采集驾驶员面部视频,通过远程光电容积脉搏波描记法测量心率、呼吸频率和心率变异性,并结合人脸视线检测识别注意力方向。

  生理感知:在安全带、座椅扶手、方向盘等位置集成非接触式或接触式生理传感器。安全带上的射频传感模块向胸腔发射近场电磁波,接收经人体生理活动调制的反射回波,以提取心率和呼吸率。

  操控感知:通过监测方向盘操控行为和刹车操作等车辆动态数据,推断驾驶员的疲劳状态。例如,车速60km/h以上时,系统可通过分析方向盘修正频率和刹车节奏,判断驾驶者是否疲劳。

  

  二、判断层:融合多模信息识别异常状态

  疲劳与分心识别:蔚来增强驾驶员感知系统将人脸视线检测与舱外感知结合,实现驾驶场景识别、驾驶员意图预测、注意力识别和多模信息融合。

  健康状态评估:系统根据预设规则计算各生理信号的健康值,加权求和形成健康评分。若健康级别异常,则输出预警或触发车辆辅助驾驶控制指令。

  触发原因分析:华为相关专利在判断驾驶员行为异常时,不仅识别行为本身,还识别行为触发原因以及驾驶员对触发原因的关注度,以提高检测准确性和鲁棒性。

  

  三、响应层:三级递进式安全干预

  初级提醒:低风险场景下采用低灵敏度提醒,驾驶员喝水、点击中控屏等操作不会触发警告;高风险场景下则及时唤回驾驶员注意力。

  中级降速:当驾驶员持续无反应时,车辆自动减速直至完全停下并打开双闪,系统通过文字和语音每3秒重复提醒一次。

  高级接管:若驾驶员仍无响应,车机自动拨通救援中心电话,实现失能状态下的安全兜底。