Vals AI

3 篇报道

Vals AI 是一家独立 AI 模型评测机构，联合创始人兼 CEO 为 Rayan Krishnan，负责评估 OpenAI、Anthropic 等公司的模型。近期报道中，Vals AI 发现 DeepSeek V4.1 Flash 在多步攻击性网络安全任务上优于通过 Daybreak 可信访问计划测试的 GPT 6 Sol；其研究还显示，AI 智能体团队相比单智能体质量提升有限，成本却最高达 5.1 倍。

相关话题

Vals AI：DeepSeek V4.1 Flash在网络安全任务上击败GPT 6 Sol

Vals AI测试显示，DeepSeek V4.1 Flash在多步进攻性网络安全任务上表现优于通过Daybreak可信访问计划测试的GPT 6 Sol。

r/LocalLLaMA · 12 天前

Vals AI DeepSeek GPT 6 Sol

研究：AI智能体团队成本高企，质量提升甚微

Vals AI研究显示，AI智能体团队相比单智能体性能提升有限，成本却最高达5.1倍。四项测试中仅一项（GPT-6 Sol与Claude Opus 5.5）出现可测增益，Anthropic数据也显示超过十个智能体后质量停滞而token成本持续上升。

The Decoder · 21 天前

Vals AI GPT-6 Sol Claude Opus 5.5

Vals AI：独立测试落后于模型能力提升

Vals AI 联合创始人兼 CEO Rayan Krishnan 指出，对模型的测试评估投入未跟上能力提升速度。他的公司为 OpenAI、Anthropic 等提供独立评估，观察到早期递归自我改进迹象，但模型仍远落后顶尖人类研究者。

Bloomberg · 47 天前

Rayan Krishnan Vals AI OpenAI

已经到底了