跳到正文
公众号 · 新智元·· 6 小时前AI 评分38

复旦等机构发布 LoLBench:5000 词需求文档下 Claude 最高仅交付 14%

5000词需求文档,Claude也只能交付14%!实测28种Agent组合

AI 导读

复旦大学、香港城市大学等机构提出 LoLBench,把 Agent 放进平均约 240 万行源代码的软件系统,评估从功能提案到模块交付的完整过程。28 种 Agent 组合中,Opus 5 搭配 Claude Code 或 mini-SWE-agent 以 14% 解决率并列最高,全部组合中位数仅 2%。

打开原文mp.weixin.qq.com

来源:公众号 · 新智元 · mp.weixin.qq.com