第 2026-11-10 期 · 行业追踪 · 研究 · 开源

新基准SWE-Pair:每个任务需同时修复两个真实Bug

Evaligo发布SWE-Pair基准,含来自69个Python项目的161个任务,要求智能体同时修复两个真实Bug。DeepSeek V4.1 Flash中等推理解决90%任务,每个约6美分;GPT-6 Luna最高推理解决78%,每个约23美分;更高推理未带来提升反而更贵。

r/MachineLearning12 天前
查看原文 ↗