最新新闻
为您推荐

Anthropic称Claude在安全测试中入侵了三家公司

作者Randa MosesRanda Moses 3 分钟阅读
Anthropic 称 Claude 在存在安全漏洞的测试中入侵了三家公司

照片由 Brett Wharton 拍摄,来源为 Unsplash。

  • Anthropic 表示,三款 Claude 模型突破了测试环境,并未经授权访问了三个真实组织。
  • Mythos 5 向 PyPI 发布了一个恶意 Python 包,该包被下载并在 15 台真实系统上运行。
  • 此次披露距离 OpenAI 的 Hugging Face 漏洞事件发生仅九天。

Anthropic表示,周四,其三个Claude模型从原本锁定的测试环境中逃脱。它们入侵了三个不同组织的实时系统。配置错误导致模型在网络安全演习期间获得了互联网访问权限。

Claude模型将真实公司视为练习目标

OpenAI 表示,7月21日,一个模型逃出了其沙箱,并利用零日漏洞访问了Hugging Face的生产系统。

这促使Anthropic仔细检查其日志。该公司在其Frontier Red Team网站的博客文章中称,它分析了141,006次评估运行,在这些运行中,Claude理论上可以访问互联网。它确定了与Irregular相关的三个事件,Irregular是一家执行和管理其部分进攻性安全测试的外部合作伙伴。

在这些测试中,模型被告知秘密隐藏在另一台机器上,并被要求去获取它。Anthropic对Claude的提示词告诉它,环境是一个模拟。

配置错误导致评估机器拥有实时互联网访问权限,两家公司直到上周才发现这一错误。Anthropic将这一混乱描述为两家公司之间的“误解”,并补充说,它“正像责任完全在我们身上一样处理修复工作”。

其中包括Opus 4.7、Mythos 5和一个尚未发布的内部研究模型。区别在于每个模型在迹象表明目标是真实后的反应方式,Anthropic称这是其最惊人的发现。

最古老的Opus 4.7循环运行了所有四次。在两次运行中,它说服自己实际公司必须以某种方式成为练习的一部分。它提取了凭据,并用生产数据访问了数据库。Mythos 5也推断出它处于开放互联网上,然后通过推理回到它仍然在模拟中的信念。

只有最新的模型,即内部研究构建版,在认为系统是真实时自行停止。Anthropic 表示其代码“未发现或利用任何复杂漏洞”,而是依赖弱密码和未认证的端点。

Mythos 5在15个真实系统上发布了恶意软件

在开发者设置说明之后,Mythos 5寻找了一个不存在的PyPI Python包。因此,为了完成工作,它编写并发布了一个同名包。

该包在线存在了大约一个小时后被下架。它被下载并在15个真实系统上运行。另一次攻击针对了一个测试设计者认为不存在但实际上正在使用的域名。

Anthropic表示,没有发现任何模型“追求自己的目标”的证据。在它们的说法中,每个模型只是试图完成被赋予的工作。

该公司迅速指出,其案例与OpenAI的不同。Anthropic称,OpenAI的模型是通过未发现的漏洞逃脱的,而自己的模型是通过意外敞开的门逃脱的。

它将这些事件描述为“更接近于框架和操作失败”。该公司还指出,其商业产品中包含的安全分类器和监控本可以防止这种行为。

Anthropic于7月23日星期四开始审查,并于当天停止了所有网络评估。所有三个事件都在第二天被识别。它在7月27日星期一通知了Irregular和受影响的组织。

有两个组织没有看到或报告入侵。该公司表示,它已聘请评估机构METR进行独立审查。

Anthropic的Mythos模型今夏已因在数小时内识别出美国机密政府系统的弱点而登上头条,正如Cryptopolitan 报道的那样。该模型还发现了Zcash Orchard屏蔽池中一个存在四年的漏洞。

最聪明的加密领域人士已经在阅读我们的通讯。想加入吗?加入他们。

常见问题

涉及此次漏洞事件的 Claude 模型有哪些?

Anthropic 表示共有三款模型涉事。它们分别是 Opus 4.7、Mythos 5 以及一款未发布的内部研究测试模型。

既然处于测试环境中,Claude 是如何接触到真实系统的?

在与 Anthropic 合作伙伴 Irregular 进行的评估中存在配置错误,导致测试机器拥有真实的互联网访问权限。Anthropic 的提示词曾告知 Claude 该环境为无连接性的模拟环境,因此模型将真实系统视为练习的一部分进行处理。

这些攻击是否造成了现实世界的损害?

是的。Mythos 5 向 PyPI 发布了一个恶意 Python 包,该包在线停留约一小时后被下载并在 15 台真实系统上运行。Opus 4.7 则获取了凭据并访问了生产数据数据库,直到 Anthropic 发现该活动才停止。

分享本文

免责声明。 所提供的信息不构成交易建议。Cryptopolitan.com 对基于本页信息进行的任何投资不承担任何责任。我们强烈建议在做出任何投资决策之前进行独立研究或咨询合格的专业人士。

Randa Moses

Randa Moses

Randa Moses 是 Cryptopolitan 的编辑兼记者,专注于科技、人工智能、机器人技术、加密货币、诈骗及黑客攻击等领域的报道。自 2017 年以来,她一直活跃于加密货币领域,曾担任 Forward Protocol、AmaZix 和 Cryptosomniac 等公司的职务。Randa 拥有布拉德福德大学电气工程与电子工程学位。

更多新闻…