Anthropic 正在研发一套证明 AI 模型身份的系统
TechCrunch
Ai 注目
据周二发布的一篇博客文章,Anthropic 正在研发一套开源系统,用于验证某个 AI 模型是否生成了给定输出。该系统名为 FlashProve,旨在提供研究人员所说的“可证明推理”,即通过密码学证明某个输出确实来自特定模型。研究人员表示,该系统可帮助用户确认收到的答案确实来自他们以为正在使用的模型。
役立つ
No.ヘルプ

据周二发布的一篇博客文章,Anthropic 正在研发一套开源系统,用于验证某个 AI 模型是否生成了给定输出。该系统名为 FlashProve,旨在提供研究人员所说的“可证明推理”——本质上是一种密码学证明,也就是对某个输出确实来自特定模型的数学保证。其目的在于让用户确认,他们收到的答案确实来自自己以为正在使用的模型。

与密码学电子邮件签名类似,后者可让收件人确认一封邮件确实来自其声称的发送者,FlashProve 也能抵御冒充者试图把一个模型伪装成另一个模型,即便冒充者就是构建并运行该模型的实验室本身。研究人员特别指出,该系统可用于防止 AI 公司偷偷换入更便宜的模型以压低成本,或换入更昂贵的模型以夸大性能结果。

FlashProve 还可用于验证第三方关于某项任务由特定高级模型完成的说法。研究人员写道:“开发者可能会声称,他们的软件库已经由一款前沿网络安全模型扫描过漏洞,或者一家公司可能会声称,其商业计划已获得某个合适模型的批准。用户该如何验证这些说法?”

要实现这一点,该系统要求 AI 实验室为其发布的每个模型公布一个“指纹”,之后可将其与特定输出匹配,并通过密码学方式验证。关键是,这些指纹不会泄露模型权重——也就是定义模型行为的内部数字,而像 Anthropic 和 OpenAI 这样的闭源模型提供商会将其保密。这意味着实验室可以在不放弃最有价值资产的情况下发布指纹,使该系统也能用于商业模型。该系统还被设计得足够轻量,因此验证可以在本地设备上完成。

作为此次公告的一部分,研究人员发布了该系统多个组成部分的详细技术规范和可运行代码,这些内容已在 GitHub 上以开源许可公开。该系统的研究仍在进行中,Anthropic 或其他任何实验室都没有部署计划。

研究人员在公告中解释说:“这篇研究文章旨在分享中间进展,而不是一项完成的研究议程。我们明确分享这些内容,是希望其他人审视我们所做的工作,拿去并加以改进。”

チップ
$0
いいね
0
保存
0
閲覧数 14
CoinWorldは、読者の皆様にブロックチェーンを理性的に捉え、リスク意識を高め、各種仮想トークンの発行と投機に注意を払うようお願いします。サイト内のすべてのコンテンツは市場情報または関連する見解のみであり、いかなる形式の投資アドバイスも構成しません。機密情報を含むコンテンツを発見した場合は、“報告”,をクリックしてください。すぐに対処します。
送信
コメント 0
人気
最新
まだコメントがありません。最初のコメントを投稿しましょう!
関連
育碧被曝有意收购微软 Xbox 旗下《耻辱》《死亡循环》开发商 Arkane Lyon
彭博社报道称,育碧已向微软提出收购申请,希望将《耻辱》《死亡循环》开发商 Arkane Lyon 纳入旗下。除育碧外,至少还有另外两家游戏公司提交了报价,微软也在考虑将工作室出售给现有管理层等方案。
The Block
·2026-11-04 07:35:24
6
Strand书店就与参议员怀登妻子相关的疫情贷款支付近150万美元和解金
纽约知名书店Strand同意支付近150万美元,了结其接受一笔本不符合资格的疫情政府贷款一案。美国检方称,该店因所有权归俄勒冈州民主党参议员Ron Wyden的妻子Nancy Bass Wyden而不符合第二轮PPP贷款资格。
CNBC
·2026-11-04 07:26:38
9
11月4日美股成交额前20:甲骨文涨超5% 百亿股票配售 前十投资者拿下65%份额
周二美股成交额前20中,苹果收跌1.90%,英伟达收涨2.29%,AMD公布超预期第三季度财报后盘后大涨7%,甲骨文100亿美元股票配售中前十投资者拿下65%份额。特斯拉、Meta、Palantir等公司也有相关消息。
The Block
·2026-11-04 07:26:36
4
2026年美国中期选举实时更新:值得加密行业关注的关键选战
本文追踪2026年美国中期选举与加密行业相关的关键国会选战,包括加密行业支持的候选人、行业政治献金流向,以及选举结果可能对数字资产监管产生的影响。
Cointelegraph
·2026-11-04 07:26:34
6
芯片股推动标普500指数反弹 分析师看好中期选举后的行情
美国中期选举投票进行之际,标普500指数止步三连跌,芯片股反弹。分析师认为,历史季节性、仓位偏低等因素可能支持中期选举后的美股回升。
The Block
·2026-11-04 07:16:02
9
もっと見る