本质上大模型根本不是在思考逻辑,只是在做逐Token概率接龙。
1. 它不追求事实正确,只追求语序通顺、语境贴合;
2. 最优候选词和次优候选词概率差微乎其微,可能只有万分之一差别;
3. 没有常识校验、没有事实核验、没有逻辑推演闭环,纯粹靠统计概率往下生成。
一旦概率权重偏向了通顺但错误的那条路径,它就会顺着编造下去,还自带条理、话术严谨。
也就是大家说的一本正经地胡说八道。
发布于 浙江
本质上大模型根本不是在思考逻辑,只是在做逐Token概率接龙。
1. 它不追求事实正确,只追求语序通顺、语境贴合;
2. 最优候选词和次优候选词概率差微乎其微,可能只有万分之一差别;
3. 没有常识校验、没有事实核验、没有逻辑推演闭环,纯粹靠统计概率往下生成。
一旦概率权重偏向了通顺但错误的那条路径,它就会顺着编造下去,还自带条理、话术严谨。
也就是大家说的一本正经地胡说八道。