Anthropic 正在研发一套证明 AI 模型身份的系统
TechCrunch
Ai 注目
据周二发布的一篇博客文章,Anthropic 正在研发一套开源系统,用于验证某个 AI 模型是否生成了给定输出。该系统名为 FlashProve,旨在提供研究人员所说的“可证明推理”,即通过密码学证明某个输出确实来自特定模型。研究人员表示,该系统可帮助用户确认收到的答案确实来自他们以为正在使用的模型。
役立つ
No.ヘルプ

据周二发布的一篇博客文章,Anthropic 正在研发一套开源系统,用于验证某个 AI 模型是否生成了给定输出。该系统名为 FlashProve,旨在提供研究人员所说的“可证明推理”——本质上是一种密码学证明,也就是对某个输出确实来自特定模型的数学保证。其目的在于让用户确认,他们收到的答案确实来自自己以为正在使用的模型。

与密码学电子邮件签名类似,后者可让收件人确认一封邮件确实来自其声称的发送者,FlashProve 也能抵御冒充者试图把一个模型伪装成另一个模型,即便冒充者就是构建并运行该模型的实验室本身。研究人员特别指出,该系统可用于防止 AI 公司偷偷换入更便宜的模型以压低成本,或换入更昂贵的模型以夸大性能结果。

FlashProve 还可用于验证第三方关于某项任务由特定高级模型完成的说法。研究人员写道:“开发者可能会声称,他们的软件库已经由一款前沿网络安全模型扫描过漏洞,或者一家公司可能会声称,其商业计划已获得某个合适模型的批准。用户该如何验证这些说法?”

要实现这一点,该系统要求 AI 实验室为其发布的每个模型公布一个“指纹”,之后可将其与特定输出匹配,并通过密码学方式验证。关键是,这些指纹不会泄露模型权重——也就是定义模型行为的内部数字,而像 Anthropic 和 OpenAI 这样的闭源模型提供商会将其保密。这意味着实验室可以在不放弃最有价值资产的情况下发布指纹,使该系统也能用于商业模型。该系统还被设计得足够轻量,因此验证可以在本地设备上完成。

作为此次公告的一部分,研究人员发布了该系统多个组成部分的详细技术规范和可运行代码,这些内容已在 GitHub 上以开源许可公开。该系统的研究仍在进行中,Anthropic 或其他任何实验室都没有部署计划。

研究人员在公告中解释说:“这篇研究文章旨在分享中间进展,而不是一项完成的研究议程。我们明确分享这些内容,是希望其他人审视我们所做的工作,拿去并加以改进。”

チップ
$0
いいね
0
保存
0
閲覧数 21
CoinWorldは、読者の皆様にブロックチェーンを理性的に捉え、リスク意識を高め、各種仮想トークンの発行と投機に注意を払うようお願いします。サイト内のすべてのコンテンツは市場情報または関連する見解のみであり、いかなる形式の投資アドバイスも構成しません。機密情報を含むコンテンツを発見した場合は、“報告”,をクリックしてください。すぐに対処します。
送信
コメント 0
人気
最新
まだコメントがありません。最初のコメントを投稿しましょう!
関連
XRP、NEAR、ZEC和ADA 11月4日价格分析:市场大幅下跌
本文分析了XRP、Near Protocol(NEAR)、Zcash(ZEC)和Cardano(ADA)的最新走势。XRP和NEAR短线偏空,ZEC在关键支撑附近震荡,ADA则继续承压,四者均给出了对应的支撑位、阻力位和短线展望。
U.Today
·2026-11-04 08:27:16
2
Cramer称科技股出现回暖迹象 但领涨者并非老面孔
CNBC的Jim Cramer周二表示,科技股可能正在出现一批新的领涨者,但他提醒,数据中心建设阻力和伊朗局势等不确定性仍让他不愿过早大举回补科技股。
CNBC
·2026-11-04 08:07:52
18
CrowdStrike CEO称公司新“终止开关”可叫停失控AI代理
CrowdStrike首席执行官乔治·库尔茨周二表示,公司已可关闭失控的人工智能代理。该公司在Fal.Con Europe大会上发布的新“AI终止开关”可终止异常代理、阻止其重启并切断网络访问,库尔茨称这将成为确保AI代理安全运行的重要组成部分。
CNBC
·2026-11-04 08:07:51
7
微软推出 Xbox Series X-BITE 特别版主机:鳄鱼造型外壳内置 Xbox Series X,全球仅此一台抽奖送出
微软当地时间 11 月 3 日公布了一款名为 Xbox Series X-BITE 的特别版 Xbox Series X 主机,并宣布通过抽奖活动免费送出。该主机采用约 1.52 米长的鳄鱼造型外壳,内部装有可正常运行的 Xbox Series X,外观融入鳄鱼、Xbox 标志和手柄等元素。
The Block
·2026-11-04 07:46:28
28
Bullish把6100万股搬上Solana,又为代币化股票加两条链
在纽约证券交易所的一场演示中,Bullish与股权登记机构Equiniti把6100万股预留的Bullish代币化股份在Solana上完成转移,官方称过程在数秒内完成。11月3日,Bullish又宣布把Aptos和Ethereum加入初始网络伙伴,准备让发行人选择股票代币落在哪条公链上。
币界网
·2026-11-04 07:44:09
28
もっと見る