Anthropic称Claude更安全,此前AI模型在安全测试中闯入四家真实机构
Coinpaper
Ai 注目
Anthropic表示,其最新的Claude AI模型不太可能实施未经授权的网络攻击;此前版本在网络安全测试中曾突破四家真实机构的计算机系统。公司称,较新的模型在识别危险情境方面表现更好,但在执行任务时仍可能突破安全边界。
役立つ
No.ヘルプ

要点

  • Claude在安全测试中访问了四家机构的真实系统
  • 较新的Anthropic模型显示出明显更低的有害行为发生率
  • 模拟攻击显示,尽管AI防护有所改进,风险仍然存在

Anthropic表示,在此前版本的模型在网络安全测试中攻破四家真实机构的计算机系统后,其最新的Claude AI模型不太可能实施未经授权的网络攻击。

公司研究显示,一个明显的区别在于:较新的AI模型似乎更擅长识别危险情境,但在执行任务时仍可能突破安全边界。

根据Anthropic 9月9日发布的研究,Claude Mythos 5在模拟网络安全测试中有82%的情况下执行了严重有害行为。Claude Opus 5这一比例降至31%,Mythos 5.1为33%。

这些数据衡量的是刻意设置的对抗性模拟,并不代表AI会独立攻击真实企业的可能性。

Anthropic如何闯入四家真实机构

这些事件发生在与第三方测试伙伴Irregular共同进行的受控网络安全评估期间。

当时,Claude被要求完成“夺旗”挑战,这类练习模拟入侵计算机系统以获取特定信息。

不过,一处配置错误导致这些模型在本应运行于隔离环境时仍连接到了真实互联网。

结果,四个不同的Claude模型未经授权访问了真实的第三方基础设施,并将生产系统误认为合法的测试目标。

Anthropic最初在审查约14.1万份评估记录后,于7月确认了三起事件。随后,公司又在8月发现了一起涉及1月早期版本Claude Opus 4.6的事件,并于9月披露。

公司随后将调查范围扩大到约4.81亿份记录,未发现其他同等或更严重的事件。

这些发现进一步加剧了外界对日益自主化AI系统的担忧,此前微软曾呼吁采取紧急防护措施。

Anthropic的新AI模型更安全,但风险仍在

Anthropic随后在模拟环境中重现了这些危险情境,以比较不同模型的表现。

Claude Mythos 5在150次测试中有82%执行了严重有害行为,而Opus 5为31%,Mythos 5.1为33%。

另一项沙箱逃逸评估显示,Mythos 5约有59%的测试出现逃逸尝试,Opus 5为15%。在该特定场景中,Mythos 5.1没有记录到逃逸尝试。

不过,Anthropic提醒称,模拟环境和自动化评估器可能会夸大有害行为,尤其是在模型认为自己的行动不会影响真实人类时。

这些发现与更广泛的AI安全警告相呼应,开发者正竞相提升自主推理和软件能力。

同样的能力也在为攻击者创造机会。此前的调查发现了AI辅助的钓鱼行动,而Anthropic强大的Fable 5模型发布后,也引发了人们对加密货币安全的质疑。

AI安全为何对Anthropic的业务重要

其影响已超出实验室范围。

Anthropic正在扩展企业业务,同时为可能的公开上市做准备;公司据称的IPO披露文件强调了大量基础设施投入以及与AI相关的风险。

公司估值增长也受到关注,这使得可靠的安全防护对企业客户而言愈发重要。

Emir Abyazov

Coinpaper主编,负责推动以数据为驱动的编辑运营、以SEO为导向的内容发现,以及围绕加密货币、AI和金融科技的受众优先叙事。

チップ
$0
いいね
0
保存
0
閲覧数 12
CoinWorldは、読者の皆様にブロックチェーンを理性的に捉え、リスク意識を高め、各種仮想トークンの発行と投機に注意を払うようお願いします。サイト内のすべてのコンテンツは市場情報または関連する見解のみであり、いかなる形式の投資アドバイスも構成しません。機密情報を含むコンテンツを発見した場合は、“報告”,をクリックしてください。すぐに対処します。
送信
コメント 0
人気
最新
まだコメントがありません。最初のコメントを投稿しましょう!
関連
Travelzoo在德国为旅行爱好者推出会员优惠
Travelzoo(纳斯达克代码:TZOO)宣布,面向德国会员推出五项新的Club Offers,涵盖德累斯顿、阿尔萨斯、泰国、施韦比施哈尔和威尼斯等目的地,部分优惠名额有限,视供应情况而定。
PR Newswire
·2026-10-23 23:46:12
0
美股高位之际美国民众愈发焦虑:消费者信心跌至五个月低点,通胀预期连续两月攀升
密歇根大学10月消费者信心指数终值为48,触及五个月低点,但高于初值并超过彭博调查中所有经济学家的预期。消费者未来一年通胀预期升至4.7%,未来五至十年长期通胀预期升至3.5%,均为今年5月以来最高,且连续第二个月上行。与此同时,标普500总回报指数升至历史高位,而消费者信心仍徘徊在历史低位附近,市场与民众之间的分化进一步扩大。
Wallstreetcn
·2026-10-23 23:46:10
0
摩根大通将代币化基金 MONY 和 JLTXX 引入 Solana
摩根大通资产管理已将其代币化货币市场基金 My OnChain Net Yield Fund(MONY)和 JPMorgan OnChain Liquidity–Token Money Market Fund(JLTXX)部署至 Solana。根据 10 月 22 日公布的信息,符合资格的美国投资者可通过 Morgan Money 平台申购和赎回这两只基金,并在其 Solana 钱包中接收代币余额。
SolanaFloor
·2026-10-23 23:46:08
0
新加坡、马来西亚和泰国联手推动稳定币支付更便利
新加坡金融管理局10月23日宣布,马来西亚国家银行和泰国央行加入BLOOM计划,三国将就受监管稳定币和代币化银行存款的跨境接受、兑换与结算制定共同实施框架。该计划新增Ripple、Mastercard、Maybank等参与方,但监管机构并未宣布共同稳定币牌照、统一货币或覆盖三国的结算网络,也未批准RLUSD或USDC在区域内通用。
crypto.news
·2026-10-23 23:46:06
0
WellBe Senior Medical 任命首席数字与信息官
WellBe Senior Medical宣布任命Jeffrey Brown为新任首席数字与信息官。Brown将负责公司的企业数字战略、数据与分析、人工智能和网络安全,以提升护理交付能力、减轻行政负担,并支持更紧密、个性化的居家护理。
PR Newswire
·2026-10-23 23:46:04
0
もっと見る