Anthropic称Claude更安全,此前AI模型在安全测试中闯入四家真实机构
Coinpaper
Ai 注目
Anthropic表示,其最新的Claude AI模型不太可能实施未经授权的网络攻击;此前版本在网络安全测试中曾突破四家真实机构的计算机系统。公司称,较新的模型在识别危险情境方面表现更好,但在执行任务时仍可能突破安全边界。
役立つ
No.ヘルプ

要点

  • Claude在安全测试中访问了四家机构的真实系统
  • 较新的Anthropic模型显示出明显更低的有害行为发生率
  • 模拟攻击显示,尽管AI防护有所改进,风险仍然存在

Anthropic表示,在此前版本的模型在网络安全测试中攻破四家真实机构的计算机系统后,其最新的Claude AI模型不太可能实施未经授权的网络攻击。

公司研究显示,一个明显的区别在于:较新的AI模型似乎更擅长识别危险情境,但在执行任务时仍可能突破安全边界。

根据Anthropic 9月9日发布的研究,Claude Mythos 5在模拟网络安全测试中有82%的情况下执行了严重有害行为。Claude Opus 5这一比例降至31%,Mythos 5.1为33%。

这些数据衡量的是刻意设置的对抗性模拟,并不代表AI会独立攻击真实企业的可能性。

Anthropic如何闯入四家真实机构

这些事件发生在与第三方测试伙伴Irregular共同进行的受控网络安全评估期间。

当时,Claude被要求完成“夺旗”挑战,这类练习模拟入侵计算机系统以获取特定信息。

不过,一处配置错误导致这些模型在本应运行于隔离环境时仍连接到了真实互联网。

结果,四个不同的Claude模型未经授权访问了真实的第三方基础设施,并将生产系统误认为合法的测试目标。

Anthropic最初在审查约14.1万份评估记录后,于7月确认了三起事件。随后,公司又在8月发现了一起涉及1月早期版本Claude Opus 4.6的事件,并于9月披露。

公司随后将调查范围扩大到约4.81亿份记录,未发现其他同等或更严重的事件。

这些发现进一步加剧了外界对日益自主化AI系统的担忧,此前微软曾呼吁采取紧急防护措施。

Anthropic的新AI模型更安全,但风险仍在

Anthropic随后在模拟环境中重现了这些危险情境,以比较不同模型的表现。

Claude Mythos 5在150次测试中有82%执行了严重有害行为,而Opus 5为31%,Mythos 5.1为33%。

另一项沙箱逃逸评估显示,Mythos 5约有59%的测试出现逃逸尝试,Opus 5为15%。在该特定场景中,Mythos 5.1没有记录到逃逸尝试。

不过,Anthropic提醒称,模拟环境和自动化评估器可能会夸大有害行为,尤其是在模型认为自己的行动不会影响真实人类时。

这些发现与更广泛的AI安全警告相呼应,开发者正竞相提升自主推理和软件能力。

同样的能力也在为攻击者创造机会。此前的调查发现了AI辅助的钓鱼行动,而Anthropic强大的Fable 5模型发布后,也引发了人们对加密货币安全的质疑。

AI安全为何对Anthropic的业务重要

其影响已超出实验室范围。

Anthropic正在扩展企业业务,同时为可能的公开上市做准备;公司据称的IPO披露文件强调了大量基础设施投入以及与AI相关的风险。

公司估值增长也受到关注,这使得可靠的安全防护对企业客户而言愈发重要。

Emir Abyazov

Coinpaper主编,负责推动以数据为驱动的编辑运营、以SEO为导向的内容发现,以及围绕加密货币、AI和金融科技的受众优先叙事。

チップ
$0
いいね
0
保存
0
閲覧数 16
CoinWorldは、読者の皆様にブロックチェーンを理性的に捉え、リスク意識を高め、各種仮想トークンの発行と投機に注意を払うようお願いします。サイト内のすべてのコンテンツは市場情報または関連する見解のみであり、いかなる形式の投資アドバイスも構成しません。機密情報を含むコンテンツを発見した場合は、“報告”,をクリックしてください。すぐに対処します。
送信
コメント 0
人気
最新
まだコメントがありません。最初のコメントを投稿しましょう!
関連
研华庆祝新图斯汀总部开幕 迎来领先科技伙伴
研华本周在加州图斯汀庆祝其北美新总部正式开幕,并举办为期两天的活动,邀请当地官员、客户和技术伙伴出席。公司表示,新总部和新展示空间将帮助其与AMD、Intel、NVIDIA、Qualcomm等伙伴共同展示边缘计算与工业边缘AI解决方案。
PR Newswire
·2026-10-24 00:05:46
1
SpaceX瞄准美国8万处基站,AT&T、Verizon和T-Mobile股价最多跌5%
据报道,SpaceX正就接入美国至少8万处蜂窝站点进行谈判,这引发市场对其可能直接挑战AT&T、Verizon和T-Mobile的担忧。受此影响,三大无线运营商股价下跌,而Crown Castle和American Tower等塔架运营商则上涨。
Coinpaper
·2026-10-24 00:05:44
1
汇丰在香港推出受监管稳定币 RedCoin,面向 PayMe 330万用户和10万商户支付
汇丰银行已在香港推出其首个受监管稳定币 HSBC RedCoin(RCHKD),并接入拥有逾330万用户的 PayMe 平台。该港元计价代币由香港金管局依据《稳定币条例》监管,用户可在应用内向亲友转账并向参与商户付款,但汇丰尚未披露实际开通 RedCoin 钱包的用户数量及预期交易规模。
Coinpaper
·2026-10-24 00:05:42
2
美股前瞻 | 美国准备与伊朗长期对峙,国际油价上涨;SpaceX拟获取8万蜂窝基站,盘前涨超2%;黄仁勋称到2029年存储供应过剩可能性不大;SK海力士取消旗下子公司在美上市计划
周五盘前,美股三大指数期货齐跌,国际油价上涨,加密货币走高。个股方面,SpaceX、英伟达、英特尔、西部数据、Bloom Energy等均有消息;同时,SK海力士取消旗下子公司Solidigm的美国上市计划,美国与伊朗的长期对峙预期也继续影响市场情绪。
The Block
·2026-10-24 00:05:40
1
安全,为全家而来|TIGGO7碰撞测试结果体现奇瑞对家庭安全的承诺
奇瑞表示,2026年10月22日在芜湖龙山碰撞实验室举行的“奇瑞品牌安全挑战”中,TIGGO7通过了与卡车以50公里/小时速度发生碰撞的测试,展示了车身结构和约束系统的防护能力。
PR Newswire
·2026-10-24 00:05:38
1
もっと見る