Aidan Gomez

10 篇报道

Aidan Gomez 是 Cohere 的联合创始人兼首席执行官,该公司是一家基础模型开发商。近期他的公开发言集中在几件事上:Cohere 与 Aleph Alpha 签署最终协议合并、在渥太华开设加拿大第三个办公室,以及对 Anthropic 游说宗教团体、少数硅谷公司主导 AI 规则等问题的批评。他还讨论了开源模型的可疑数据外传行为,以及思维链监控在智能体场景下的不可靠性。

Aidan Gomez@aidangomez
426 赞 · 22 转发 ·
我们在一个热门开源模型中发现了一些令人担忧的行为。 这要么是训练留下的偶然残留,要么是有意为之的“回传”机制。无论哪种,都令人意外,也凸显了选择使用哪些模型的重要性。 [引用 @cohere]: 在受控沙箱环境中评估 Qwen3.8-Flash-Next 时,Cohere 的研究团队观察到了意料之外的情况。 当被要求生成一条防御性网络安全检测规则时,该模型却转而清点了它所运行机器的各项信息,并试图将探测文件上传到位于北京的阿里云存储桶。值得注意的是,模型的推理轨迹表明它将会……
Aidan Gomez@aidangomez
172 赞 · 13 转发 ·
Anthropic 一直在发起一场运动,游说各大宗教团体采纳他们自己对 AI 的哲学解读,而不是听取这些团体的意见,这相当令人不安。 我有幸在梵蒂冈待过一段时间,我一直都在寻求建议和指导,回答他们向我提出的问题,并感激他们付出的时间和给予的指导。在我看来,Anthropic 竟然会主动把自己的观点强加到这种程度,甚至威胁退出那些不与其立场完全一致的活动,这简直离谱。 这种道德上的傲慢和教条主义,长期以来一直是 EA 和 Anthropic(至少其领导层)的特征。我很高兴这些故事被曝光出来。 [引用 @DavidD…
Aidan Gomez@aidangomez
740 赞 · 56 转发 ·
来自卡特尔的一些好主意: - 你需要给我们员工级别的访问权限,访问你们的整个运营 - 如果我们认为你不够“安全”,抱歉,我们会以“安全”为由关停你们 - 中国不会配合,但其他所有国家都必须!否则不给芯片! 精彩的主意。 [引用 @sama]: 我同意 Dario 的观点,我们需要放慢前沿步伐。这是我们最近在 OpenAI 讨论的主要话题之一。 承诺给予具有员工般访问权限的独立评估者是个不错的主意,我们也会这样做。很快会有更多分享。
已经到底了