Anthropic表示,最新安全措施大幅减少了攻击者从Claude模型中提取的推理数据量。该公司称,启用防护措施后,被提取的思维链令牌数量减少了90%至99%。这类攻击被称为大规模蒸馏,意在复制AI模型的能力,用于训练规模较小的竞争模型。
新防护措施如何运作
Anthropic目前禁止外部访问Claude的内部推理步骤。公司使用分类器识别疑似提取数据的查询,并自动封禁触发警报的账号。Anthropic称,已有数万个账号被封禁,同时也指出,一些正常用户误遭封禁。
哪些人受到影响
文章提到,中国企业智谱和Moonshot被指参与窃取。报道称,智谱被指窃取相关能力用于其GLM‑5.3模型,Moonshot则被指通过Claude转发查询。Anthropic警告,被窃取的能力可能被用于外国军事或监控工具。
接下来会怎样
Anthropic呼吁其他AI开发商采取类似防护措施。该公司没有披露分类器的技术细节,也未公布具体部署时间表,只表示防护措施已经上线。
为什么重要
如果这些防护措施确实如Anthropic所说有效,Claude用户因误判而遭封禁的情况可能会减少,被窃取的模型能力流入敌对方手中的风险也可能降低。不过,Anthropic承认仍有正常用户遭到封禁,因此这些措施对日常开发者的影响尚不明确。