公众号 · 新智元·· 6 小时前AI 评分42
南京大学团队提出TestPrism基准:Coding Agent写测试最强配置JSF仅28.00%
Coding agent写测试集体失败!AI代码合格率被高估一倍
AI 导读
南京大学刘佳恒团队提出测试生成基准TestPrism,包含17个来源的300个测试任务和3000个候选实现,核心指标JSF要求测试在原始代码上失败、接受所有正确实现并拒绝所有错误实现。
来源:公众号 · 新智元 · mp.weixin.qq.com
Coding agent写测试集体失败!AI代码合格率被高估一倍
南京大学刘佳恒团队提出测试生成基准TestPrism,包含17个来源的300个测试任务和3000个候选实现,核心指标JSF要求测试在原始代码上失败、接受所有正确实现并拒绝所有错误实现。
来源:公众号 · 新智元 · mp.weixin.qq.com