前沿模型难敌人类算法创新:InnovationEval评测揭示AI研发自动化差距
研究团队推出InnovationEval评测,考察AI能否独立发现与人类研究者相当的新型机器学习算法。结果显示,近期前沿模型即便耗费价值数千美元的GPU算力,也几乎未能取得进展。该评测强调端到端验证,旨在追踪AI automating AI研究的能力。
AI 日报收录的 InnovationEval 相关报道,共 1 篇,按时间倒序,每小时更新。
研究团队推出InnovationEval评测,考察AI能否独立发现与人类研究者相当的新型机器学习算法。结果显示,近期前沿模型即便耗费价值数千美元的GPU算力,也几乎未能取得进展。该评测强调端到端验证,旨在追踪AI automating AI研究的能力。