Jevons的宏观笔记
26-05-10 11:33 微博认证:科学科普博主

本质上大模型根本不是在思考逻辑,只是在做逐Token概率接龙。

1. 它不追求事实正确,只追求语序通顺、语境贴合;

2. 最优候选词和次优候选词概率差微乎其微,可能只有万分之一差别;

3. 没有常识校验、没有事实核验、没有逻辑推演闭环,纯粹靠统计概率往下生成。

一旦概率权重偏向了通顺但错误的那条路径,它就会顺着编造下去,还自带条理、话术严谨。

也就是大家说的一本正经地胡说八道。

发布于 浙江