最近有网友在我微博上建议改用 Pi 这款开源的 Coding Agent Harness 工具,但我们实测之后发现 Pi 默认的开源模型配置也有兼容性问题,直接使用原装版本跑我司内部的 Coding Evals 测试集,会比我们自己修复和改进过的 opencode 落后 10 ~ 18 分(满分 100分)。我们调整过 Pi 默认的开源模型配置文件之后,终于可以和我们增强过的 opencode 的分数差不多了。
Pi 的另外一个坑是 json 模式会为单个 sesson 生成几百兆到几个 G 的日志文件,也有些伤不起,我们也自己绕过了。
发布于 美国
