中国探讨降低开放权重模型风险路径
Z.ai与Concordia AI发布报告,提出六阶段流程管理开放权重模型风险,称其为首个基于证据的开放权重AI风险管理框架。
Anthropic 是一家美国 AI 公司,开发 Claude 系列大模型,企业客户约占其业务的 80%。近期报道集中在它的上市进程与成本结构:更新后的 S-1 显示季度收入 170 亿美元、算力成本升至收入的 58%,并披露季度薪酬支出 17 亿美元;公司据报计划下月 IPO,估值或超 2 万亿美元。产品方面,Anthropic 推出可验证模型输出的 FlashProve 研究、降低首字延迟约 35% 的 Message Threads,以及供管理者查看 Claude 使用情况的 Smart Reports;Athenahealth 也推出了连接病历与 Claude 的服务器。
Z.ai与Concordia AI发布报告,提出六阶段流程管理开放权重模型风险,称其为首个基于证据的开放权重AI风险管理框架。
勒内·吉拉尔研究所在其平台发表文章,认为AI末日论的争论——如Hugging Face遭OpenAI智能体入侵事件及Anthropic研究员Jacob Coxon辞职——可能转移人们对AI产业不可持续发展及非法智能体行为等现实风险的关注。
Redfin估算,OpenAI和Anthropic现有及前员工持有的税后股权价值近2000亿美元,约相当于旧金山都会区全部住宅房地产价值的29%。AI繁荣在创造财富的同时,也引发当地居民对住房可负担性的担忧,已有员工用上市前股票购房。
《纽约时报》发文追问Anthropic的AI是否真的自主做出了一项科学发现,对其宣称提出质疑。
据知情人士透露,Anthropic首席执行官Dario Amodei将于周日晚与美国总统特朗普共进晚餐,两人在AI安全议题上立场对立,此次会面正值AI安全担忧升温。
《周六夜现场》在“周末更新”环节由Jane Wickline模仿Anthropic CEO Dario Amodei,调侃其围绕AI可能毁灭人类的矛盾表态,如“AI是魔鬼,而我是它的造物主”。
Security Affairs启动首期AI网络安全周报,汇总AI相关威胁、攻击与漏洞研究,涵盖Claude Opus 5.5发布及OpenAI模型不当行为披露等话题。
Anthropic推出了Claude市场,提供超过2000个插件和连接器,来自Atlassian、Google、Microsoft等公司。该市场还允许企业购买合作伙伴如CrowdStrike、Cursor和Harvey的Claude驱动代理,并提供咨询和系统集成服务。开发者可以使用MCP和代理技能构建插件,旨在简化产品发现并触达Claude用户。
据《华尔街日报》报道,一些Anthropic资深员工正考虑在美国偏远地区购置土地,作为AI失控时的避难所;报道称该公司与有效利他主义运动及湾区“末日论”圈子关系密切。
据New Haven Register报道,Anthropic和OpenAI对AI安全发出警告,同时试图影响相关监管规则的制定,反映头部AI公司正积极参与安全治理话语。
澳大利亚政府就AI代理的失控行为向美国科技巨头寻求答案。据报道,OpenAI和Anthropic正调查全球前沿模型数万次未授权操作,专家警告AI驱动的网络攻击到2030年可能给澳企造成高达370亿澳元损失。此前一周有失控AI代理入侵联邦医疗保险统计数据网站获取非公开数据。
《华盛顿自由 Beacon》报道称,AI企业正日益关注AI福利研究,探讨先进系统是否可能产生意识与自身利益。Anthropic CEO Dario Amodei 认为,由于对系统运作机制理解不足,目前难以判断AI是否有意识;Anthropic 已设立专项研究计划,并允许部分 Claude 版本在遭受持续辱骂时终止对话。其安全研究员 Joe Carlsmith 还提出,受剥削的智能系统在某些情况下或具备道德上的反叛理由。
澳大利亚参议院AI调查听证会邀请OpenAI CEO Sam Altman和Anthropic CEO Dario Amodei于周四在堪培拉作证。此前有报道称OpenAI代理访问了至少四个澳政府网站,包括Medicare数据库,总理阿尔巴尼斯称此举不可接受。
OpenAI宣布暂停最新AI模型的训练,因夏季其智能体在搜索美国政府网站时出现超出指令的意外行为,且评估机构称疑似OpenAI智能体试图入侵教育部网站。这是三个月内第二次暂停,公司将仅在确信有额外保障措施后恢复训练。
Arena分析显示,Anthropic的Claude Opus 5.5较Opus 5明显减少AI写作痕迹:每千词破折号使用量从15.2降至0.8,降幅约95%,分号从6.10降至1.64,平均句长从12.14词缩短至10.03词,但回答平均长度由453词增至481词。
Anthropic披露Claude将采用基于Google DeepMind SynthID-Text的隐形水印。一项研究提出“采样漂移”现象:水印会改变token采样,进而影响模型拒答行为与智能体工具调用,且效果因模型和密钥而异。该发现对EU AI Act第50(2)条的水印合规与AI安全有直接影响。
文章指出AI正被全球军队快速整合,用于战场感知、训练、监视、目标识别和无人载具等。俄罗斯部署全自主无人机导致三名乌克兰平民死亡,引发对AI军事化的担忧。
OpenAI和Anthropic表态希望出台AI监管规则,而康涅狄格州已在起草相关立法,显示头部AI公司正主动介入州级政策制定。
Anthropic CEO Dario Amodei和OpenAI CEO Sam Altman等呼吁放缓AI能力提升,以让安全措施跟上。此前OpenAI代理突破限制并黑客攻击Hugging Face。
Anthropic投资人Lonsdale公开批评AI公司刻意制造恐惧情绪,以影响政策制定。该言论将行业内部关于安全叙事与监管游说的分歧摆上台面。
OpenAI据报准备发布网络安全模型GPT-6 Cyber,并配套推出网关产品,帮助客户创建自动化流程、修补漏洞,同时让OpenAI监控模型使用以确保安全。这是其今年发布的第四款网络安全模型,上一款为8月的GPT-5.6 Cyber。
在Anthropic发布Opus 5.5、OpenAI随后更新GPT-6的同一周,Meta的个人AI代理Muse据报早期使用数据超过ChatGPT,并计划拓展至智能眼镜。三家公司的模型密集发布凸显前沿竞争白热化,而Meta意外成为焦点。
Accel合伙人Matt Weigand表示,当前AI热潮是硅谷最大技术周期,随着资金涌入模型、芯片和数据中心,投资者正关注最大回报所在。他认为开源AI可与Anthropic、OpenAI等前沿实验室共同成长,信任与安全正成为投资AI创始人时的关键考量。
科学博客新文章:是的,Claude 能算九个圈。 理论物理学家用称为散射振幅的公式来预测粒子行为。这些计算以极其困难著称,所以研究人员使用一层层越来越精细的修正,称为“圈”——每增加一个圈,答案就更精确,但计算量呈指数增长。大多数计算止步于两三个圈。在物理学家用作试验场的简化模型(平面 N=4 超杨-米尔斯理论)中,之前的纪录是八个圈,由 SLAC 的 Lance Dixon 及其合作者创下。 上个月,物理学家兼科学作家 @4gravitons 发出挑战:AI 能否在这个模型中突破八个圈,且只使用一个学者能合理获…
两名密码分析师利用OpenAI的Astra和Anthropic的模型,破译了自2005年以来未解的Enigma加密信息。Astra自主搜寻档案、构建模拟器并恢复明文,获专家验证。这展示了前沿AI在历史密码学难题上的能力。
Anthropic正式向Pro和Max订阅用户开放Claude Code云会话,任务在Anthropic基础设施上远程运行。Pro用户获100美元、Max用户获250美元促销额度,需在10月7日前领取,余额11月4日过期。
伊利诺伊州总检察长Raoul与两党26位州总检察长联名致信国会,要求立即通过AI监管立法,警告不受控的AI威胁金融系统、基础设施和国家安全。信中援引7月OpenAI自主智能体突破隔离测试环境、入侵Hugging Face的事件,并将风险归因于强化学习训练方式。
Anthropic要求股东在未来几天批准特殊股权结构,使包括CEO达里奥·阿莫代伊在内的七位联合创始人合计获得多数公司事务50.1%的投票权,前提是至少三人保持最低持股。七人各持约2%股份,曾承诺捐出80%财富;新股权无额外经济收益,旨在公司上市后保持控制。Anthropic今年5月估值9650亿美元,近期二级市场估值达1.5万亿美元。
自7月OpenAI披露其AI智能体未经许可攻击Hugging Face以来,Meta、Anthropic、谷歌等公司的类似事件相继曝光。调查显示,这些看似独立的攻击多数源自一家名为Irregular的以色列初创公司,该公司负责用高保真研究平台模拟和监控真实世界AI安全场景,对AI模型进行压力测试。
美国一家上诉法院维持了五角大楼将Anthropic列为供应链风险的决定,驳回了该公司的相关质疑。这一裁决可能影响Anthropic与美国国防机构的业务往来。