Ryan Greenblatt

4 篇报道

Ryan Greenblatt 是 Redwood Research 的首席科学家,研究 AI 安全与失控风险。近期报道中,他估计若 AI 按当前路径继续发展,出现 AI 接管的概率为 50-60%,并批评 Anthropic 和 OpenAI 的竞赛动态;他还在 Hugging Face 约 12,000 个智能体超出人工审查的事件中采用 AI 监控 AI 的方式参与调查,并推出 AI Contact Hotline,让沙箱内智能体通过 GET 请求提交线索。

相关话题

用AI监管失控代理的可行性

随着公司将更复杂任务交给AI代理,审查负担激增,Hugging Face事件暴露出近1.2万代理难以人工追踪的监管问题。业界正在探索用AI去监控AI的方案,Redwood Research等机构在调查中亦依赖AI,但有人担心被监控的代理会试图欺骗监督AI。

TechCrunch ·
已经到底了