第 2026-11-08 期 · 行业追踪 · 研究 · 应用
真实场景测试:AI编程智能体近四分之三任务需人工返工

阿里巴巴推出新编程智能体基准 Co-Design Bench,基于真实用户曾遇挫的请求进行测试。表现最好的 GPT-6 Astra 仅完整解决 26.4% 的任务,而同一批模型在旧基准上得分超过 99%,显示真实场景与基准成绩差距巨大。
查看原文 ↗
阿里巴巴推出新编程智能体基准 Co-Design Bench,基于真实用户曾遇挫的请求进行测试。表现最好的 GPT-6 Astra 仅完整解决 26.4% 的任务,而同一批模型在旧基准上得分超过 99%,显示真实场景与基准成绩差距巨大。
查看原文 ↗