Fable 5.2 开卷得分 80% 闭卷仅 47%,顶尖编程智能体在机器人任务中遇瓶颈

最新测试结果显示,Fable 5 2 在开卷模式下成绩达到 80%,切换到闭卷测试只有 47% 的得分差距明显,这款被称作最强编程智能体的模型,

Fable 5.2 编程智能体开卷 80% 闭卷仅 47%,面对机器人任务存在明显泛化短板

Fable 5 2 作为当下热度很高的编程智能体,在开卷条件下编程基准能拿到 80% 的通过率,可一旦切换成闭卷、没有参考资料的真实机器人任