Emma的衣橱
26-07-08 10:25 微博认证:投资内容创作者

你以为屏幕那头的 AI 在深思熟虑,其实它早就大脑宕机了。没错,AI 也会像人类一样因为紧张而语无伦次。当它开始不受控制地重复“等等”、“让我想想”的时候,就是它陷入逻辑死胡同、疯狂卡壳的标志。这篇文章讲述了一个非常有趣的前沿故事:研究人员是如何通过一场精准的“微创手术”,彻底治好 AI 的“结巴”和“复读机”综合征的。

### 1. 什么是“末日循环”(Doom Loop)?

你有没有遇到过跟AI聊天,或者让AI做道复杂的数学题时,它突然开始发神经,不断重复同一句话?比如:“等等,让我再想想……等等,让我再想想……”直到把屏幕占满。
科学家们把这种AI陷入死胡同、疯狂复读的现象,幽默地称为“末日循环”。

### 2. AI 为什么会变成“复读机”?

文章指出了三个导致AI卡壳的原因,你可以把它想象成一个人在紧张时产生的不良习惯:

* **坏习惯(过度训练):** AI 在学习时看了太多像“所以(So)”、“等等(Wait)”这样的过渡词。当它遇到很难的数学或编程题,脑子“卡壳”不知道下一步该怎么办时,就会本能地蹦出这些词来给自己找退路。

* **滚雪球效应(上下文强化):** 就像人说话有时会结巴一样,AI 只要不小心重复了一次,它脑子里的机制就会让它觉得“我刚才说了这句话,那我接着说这句话肯定没错”,导致重复的概率越来越高,最后彻底失控。

* **钻牛角尖(贪婪采样):** 为了让 AI 回答问题显得稳重、不乱说话,科学家通常会限制它的发散思维(即低温度设置),让它每次只选“最保险、概率最高”的词。结果,一旦陷入循环,那个重复的词就成了它眼里唯一的“最优解”,怎么拉都拉不出来。

### 3. 以前是怎么治的?(治标不治本)

以前的办法很简单粗暴:**扣分**。只要AI敢重复说话,系统就强行扣分惩罚它。
但这有个大问题:这种惩罚是“无差别攻击”的。虽然AI不复读了,但它也变得不敢正常说话了,甚至会变笨,解决复杂问题的能力大幅下降。

### 4. 这篇文章提出了什么“新绝招”?(Antidoom)

Liquid AI 的研究人员发明了一种叫 **“Antidoom”(反末日循环)** 的定向微调技术。你可以把它理解为“精准心理辅导”:

* **精准定位:** 他们不去盲目惩罚AI,而是像看监控录像一样,精准找到AI**刚开始准备复读的第一个字**(那个引发循环的罪魁祸首)。

* **对症下药(FTPO技术):** 找到这个字后,他们只在这个特定的瞬间对AI进行“教育”。告诉它:“当你犹豫不决想说‘等等’的时候,你应该换个思路,选别的有用的词。”

* **保护大脑:** 因为只修改了这一个关键节点的选择倾向,AI 大脑中其余 99.9% 的知识和能力完全没有被破坏。

### 5. 结果如何?

效果出奇的好!
经过这种“精准心理辅导”后,AI 遇到难题时陷入“复读机”的概率从 **10.2% 断崖式下降到了 1.4%**。而且,因为不再把时间浪费在死循环上,AI 顺利解出难题的概率也大大提高了,整体变得更聪明了。

---

**总结一句话:**
科学家们发现了一种极其精准的“微创手术”,专门切除了AI在遇到难题时喜欢“原地转圈圈”的坏毛病,不仅治好了它的复读机综合征,还没留下任何后遗症。

原文:http://t.cn/AXo3O1m5

发布于 美国