太空中的高能宇宙射线确实会撞击AI芯片,随机翻转存储单元中的比特,但大模型对位翻转有较强韧性,少量数值扰动通常不会显著改变推理结果。真正麻烦的不是推理误差,而是控制逻辑、存储器和通信链路中的错误——这些部位无法靠模型参数冗余自动消化。
一、宇宙射线怎么让芯片出错
单粒子效应:高能粒子穿过芯片时在存储单元或逻辑电路中瞬间注入电荷,把0翻成1;地面机房靠建筑屏蔽,太空设备只能靠军规级加固或三模冗余
加固代价:抗辐射芯片比普通商用芯片贵8到10倍,性能还未必跟得上地面旗舰芯片
二、大模型为什么相对扛得住
参数冗余:大模型参数规模巨大,少量比特翻转对最终输出影响有限,马斯克称神经网络对位翻转具备强韧性
任务差异:启发式程序比大模型更容易受位翻转影响,容错能力因任务类型而异
三、真正的风险在系统层不在数值层
错误位置决定后果:翻转出现在权重或激活值上,可能只是一次推理偏差;出现在控制逻辑、存储器地址或通信链路中,则可能导致锁死、复位或永久器件损伤
工程对策:按失效模式分级防护,芯片、存储、通信分别做纠错、冗余、重试与故障隔离,而非简单取消防护