对比上一代Fable 5.1,Fable 5.2在复杂编程、科研智能体和机器人控制上的跑分提升最集中:复杂编程分升至49.1%,FrontierCode 2.0从32.4%提高16.7个百分点,Terminal-Bench-Science从52.6%升至74.6%,RoboDojo从27.6%升至64.9%。
一、编程与软件工程跑分
FrontierSWEv2:Fable 5.2得分69.9%,上一代Fable 5.1为56.3%,高出13.6个百分点。
AutomationBench:Fable 5.2为51.4%,上一代31.4%,提升20个百分点。
FrontierCode 2.0:首句已列提升幅度,这项测试关注代码修改能否达到项目维护者愿意接纳的标准。
二、科研、图表与电脑操作
BenchCAD 2.1:Fable 5.2在Max档得分83.5,上一代Fable 5.1为44.4。
Chartography:Fable 5.2从上一代44.8%升至73.4%,提升28.6个百分点。
OSWorld 2.1:Fable 5.2为89.3%,上一代83.5%,提升5.8个百分点。
三、看跑分时的口径
同档位比较:这些分数来自带努力档位标注的测试表,比较Fable 5.2与上一代时应看同一档位。
提升集中:从已披露项目看,增幅更明显的是需要多步骤工具调用、长链条执行和物理世界控制的智能体任务。