贾凡-失落的大蒜
26-10-28 21:40 微博认证:科技博主

另外我的说一句哈,Cognition 的 FrontierCode 2.0 这个评分问题很大,Claude家模型用Claude Code,OpenAI模型用Codex,其他开源模型统一他家的devin。。。

这就很傻叉,导致FrontierCode普遍得分不高,进而导致AA评分国产分数普遍不高。

所以新版AA分数国模应该至少都差3分起步(20 * 15% = 3, 15%为权重)。 ​​​​

发布于 辽宁