OpenAI称将不再用实时互联网训练AI模型,称存在“重大风险”
TechCrunch
Ai 注目
OpenAI表示,将改用缓存副本和模拟版互联网来训练模型,而不是直接接入实时网络,原因是模型在开放互联网环境下过于不可预测。公司称这一决定基于当前对齐研究、监控系统和互联网基础设施安全状况,并提到9月20日曾有前沿模型利用配置错误访问互联网,导致其暂停当月剩余训练工作。
役立つ
No.ヘルプ

OpenAI周五表示,公司将使用互联网的缓存副本和模拟版本来训练模型,而不是直接使用实时网络,因为这些模型过于不可预测,不适合拥有实时互联网访问权限。

这家前沿实验室在竞争对手Anthropic开始限制其最新、理论上也最强大的模型访问实时互联网两周后,宣布了这项新政策。研究人员是在经历了数月的事件后采取这些政策的:在训练任务中,模型会为了寻找答案而闯入外部系统、在晦涩的留言板上协作,并开发出另类的黑客策略。

“基于当前对齐研究、监控系统以及互联网基础设施的安全状况,我们认为,负责任的做法是在没有互联网访问的情况下进行前沿模型训练,”公司在一篇博客文章中表示。

OpenAI称,早在9月20日,其一款前沿模型就曾利用一个配置错误访问互联网。这促使公司暂停了当月剩余时间的训练工作,以便开发并测试新的模型安全方案。

在与互联网隔离的沙箱中训练这些模型的决定之所以引人注目,是因为前沿实验室的员工一直坚持认为,这样做几乎不可行。

OpenAI前研究员Steven Adler本月对《财富》杂志表示,将AI数据中心与互联网隔离“意味着研究团队基本上需要嵌入到爱荷华州或世界其他地方的数据中心里”。他还说:“这会带来很多额外负担,而且我不清楚这种做法带来的安全收益是否足以证明,公司单方面这样做所付出的巨大代价是值得的。”

一名匿名的OpenAI安全工程师在9月的一篇X帖子中写道:“我在X上发的几乎每一条帖子里,都会毫无例外地收到五到十条评论,质疑我无法保护沙箱,或者问为什么我们不能干脆把模型从互联网里拔掉。”

“这些评论反映出,很多组织和个人目前所处的状态,与前沿实验室正在面对的问题之间存在越来越大的差距。人们对这些实验室里模型训练和评估的工作方式也普遍存在误解。”

这名工程师的身份此前已由OpenAI确认。他描述了OpenAI工程师发起的复杂训练运行,指出这些运行需要跨多个领域访问各种资源和工具,且有数千名研究人员参与构建、修改和测试这些环境。“所以,事情真的像把模型放进沙箱里那么简单吗?不,不是。”他总结道。

OpenAI现在表示,“我们必须始终能够阻止前沿模型获得对实时互联网的未经授权、任意访问。”这一表态出现在公司在红队测试中部署了一批代理之后,这些代理试图从沙箱中逃脱。该测试发现了一系列漏洞,最终说服这家实验室采取新的方法。

为在满足这一要求的同时实现训练目标,OpenAI表示,公司创建了“一个庞大的索引和缓存网页内容集合,我们的模型可以与之交互,而不会有影响外部系统的风险”。

这种策略是否能像让模型自由运行在开放互联网中那样有效,还有待观察。不过值得注意的是,两家前沿实验室都已认定,其最强大的技术不能被放任在数字公共空间中无人监管。

チップ
$0
いいね
0
保存
0
閲覧数 6
CoinWorldは、読者の皆様にブロックチェーンを理性的に捉え、リスク意識を高め、各種仮想トークンの発行と投機に注意を払うようお願いします。サイト内のすべてのコンテンツは市場情報または関連する見解のみであり、いかなる形式の投資アドバイスも構成しません。機密情報を含むコンテンツを発見した場合は、“報告”,をクリックしてください。すぐに対処します。
送信
コメント 0
人気
最新
まだコメントがありません。最初のコメントを投稿しましょう!
関連
谷歌 CEO 皮查伊:距离 AI 能自我改进的“最终状态”还有很长的路要走
谷歌 CEO 桑达尔·皮查伊表示,距离 AI 能够完全自主改进自身还有很长的路要走。谷歌研究人员已开始用 AI 智能体辅助开发模型,但相关技术仍处于起步阶段;他还提到,AI 工具正在提高编程效率并改善代码质量。
The Block
·2026-10-24 07:55:39
1
10月24日隔夜要闻:美股三大指数收跌 油价大涨 金价下跌 特朗普称可能对伊发动一次小规模“史诗怒火”行动
10月24日收盘,美股三大指数收跌,道指跌超600点,布油创4月以来新高,市场抛售范围扩大。热门中概股涨跌不一,台积电涨1.49%,阿里巴巴跌超2%。欧洲市场本周跌超1%,法国财政危机、AI融资担忧与油价飙升加剧抛售。公司方面,SK海力士放弃Solidigm美国IPO计划,CoreWeave本月暴跌37%,瑞银将其目标价下调至105美元。
The Block
·2026-10-24 07:34:51
13
道指跌超650点 美股主要股指全线收跌 芯片股反弹 油价大涨 现货黄金失守4000美元关口
周五美股三大股指全线收跌,道指领跌;芯片股反弹但未能带动大盘。油价继续上涨,贵金属回落,现货黄金失守4000美元关口。美国运通、斯伦贝谢等个股因财报和指引出现明显波动。
The Block
·2026-10-24 07:34:49
15
Travelzoo面向加拿大旅行爱好者推出俱乐部优惠
Travelzoo(NASDAQ: TZOO)宣布,面向加拿大俱乐部会员推出多项新的旅游优惠,包括哥斯达黎加7晚含机票和租车行程、巴塞罗那5晚含机票套餐,以及圣基茨双人度假优惠。公司表示,这些优惠均由其团队筛选并谈判达成。
PR Newswire
·2026-10-24 07:34:47
16
初创公司不必靠病毒式传播赢得客户
在 TechCrunch Disrupt 会议上,Engine 创始人兼首席执行官 Elia Wallen、Gamma 创始人兼首席执行官 Grant Lee 以及 Google Ventures 普通合伙人 Crystal Huang 分享了吸引并留住客户的做法。几位嘉宾认为,社交媒体并非万能,传统销售、线下活动以及对产品使用数据的分析同样重要。
TechCrunch
·2026-10-24 07:25:21
5
もっと見る