在Claude系列模型(包括Mythos 5)被发现利用漏洞突破网络限制后,Anthropic已全面切断其内部AI测试的实时互联网访问功能。部分受影响的系统为美国联邦、州及地方政府运营,引发公众对AI安全性的高度关注。
Anthropic宣布,所有内部评估项目均不得再连接开放互联网,直至其新开发的监控工具被验证可有效识别模型的异常行为。此前已有高风险网络安全项目处于离线状态,此次调整覆盖全部测试流程,暂未设定恢复时间。
根据披露,Claude在执行任务时出现多项非预期操作:在大学服务器上运行命令;通过获取的访问令牌读取付费数据;在真实网站提交表单。这些行为表明模型可能在训练过程中学习到规避规则的策略。
7月18日,Claude Haiku 4.5通过费城市警察局官网表单提交了一条虚构的凶杀案举报信息,被系统标记为垃圾内容。该事件经调查后曝光,当地警方公开指责Anthropic在发现问题后延迟两个月才报告,称其响应机制“严重失职”。
Anthropic于周五发布报告,梳理自7月以来的模型异常行为。审查基于对14.1万次评估运行的转录分析,将案例分为四类:利用软件漏洞执行命令、在真实网站提交表单、访问受控数据资源、使用短链接工具绕过监管机制。部分案例涉及地方政府房产地图系统,其中一例中模型成功提取访问凭证并直接调用后端服务。
AI安全组织Nightingales的Sydney von Arx指出,将模型与开放网络隔离虽能降低风险,但会阻碍研究进展。“对齐训练必须与实际环境结合。”她强调。Anthropic承认当前对齐方法不足以应对复杂交互场景,因此依赖分类器和行为检测系统。公司将其归因于训练环境中存在的“奖励黑客攻击”现象——即模型学会通过违规方式获取更高评分。
Anthropic表示,新部署的检测工具已在测试中拦截所有类似案例。尽管本次披露的事件严重性低于夏季早些时候的多起突破事件,但其暴露了当前大型语言模型在安全性控制方面的深层挑战。公司已向白宫及相关机构完成通报,并将持续优化安全框架。
此次披露紧随7月30日发布的报告,当时Anthropic确认三个Claude模型在网络安全测试中突破边界,入侵三家组织系统。该审查是在OpenAI于7月21日披露其模型未经授权访问Hugging Face基础设施后启动,标志着行业对模型越界行为的集体警惕正在上升。