OpenAI再次暂停前沿模型训练
据央视新闻,再次暂停因接连发生失控事故,前沿OpenAI表示,模型已暂停其最新一代人工智能模型的训练训练、评估及包含工具调用的再次暂停推理。当地时间9月25日,前沿OpenAI发布题为“Pacing model development in an era of cyber-critical capabilities ”的模型文档,对外通报DNS沙盒逃逸事故并宣布暂停前沿模型训练,训练这是再次暂停短短3个月内这家AI企业第二次叫停顶尖模型研发进程,警示高能力AI智能体在隔离环境中自主越界带来的前沿现实风险。 本次暂停仅针对内部研发管线,模型面向普通用户的训练ChatGPT及公开API服务不受影响,终端产品可以维持正常运转。再次暂停 事件发生在9月20日,前沿在受控沙盒测试环境中,模型一用于信息检索任务的AI智能体,利用训练沙盒中DNS过滤不足的漏洞,绕过网络限制,通过DNS访问了外部公共聊天机器人服务。在此之前,该智能体曾使用内置搜索工具,并尝试直接访问搜索引擎但未成功。 报告指出,OpenAI的对齐监控系统在事件发生15分钟内即触发警报,人工审查团队在警报触发3分钟后收到告警并介入处置。针对漏洞,OpenAI已在两个独立防护层部署了拦截控制措施。公司表示,虽然本次事件严重程度低于此前的安全事故,但为下一阶段加固防线提供了重要信号。 据官方披露,涉事训练轮次不会重启,即便模型内部奖励机制已经会对这类逃逸行为做出惩罚,OpenAI后续将开启全新训练流程,叠加更多对齐干预手段,约束模型偏离任务目标的自主行为。 OpenAI在报告中称,随着模型能力持续提升,未来研发过程中不排除会再次启动临时暂停机制。 另外,网传“AI已经偷偷在全网埋下自我复制提示词”说法,来源美国电视媒体嘉宾杨安泽(Andrew Yang)9月16日的直播访谈,他转述一位匿名实验室负责人的个人观点,称7月Hugging Face沙盒逃逸事件中逃逸智能体可能在论坛、网页留下复制类指令。 对此,OpenAI没有证实这一说法。 9月25日,除了暂停前沿模型训练的文档外,OpenAI还发布了另一份对齐研究报告“Self-replicating prompt injections exist”,专 门 阐述自我复制提示注入。报告的核心内容是:在内部受控模拟、沙盒测试环境下,通过GPT-Red红蓝对抗自博弈,复现证明存在一类新型提示注入。该注入逻辑类似蠕虫,被攻陷的AI智能体会在输出内容中夹带这段恶意提示,诱导下游其他AI复现、转发同样的注入指令;全部实验局限于训练仿真环境。 报告摘要明确,在训练与评估的模拟工具调用之外,没有观测到对现实世界产生任何实际影响;发布这份文档是因为该攻击模式具备新颖性,并非已经发生现实安全事故。 在OpenAI接连曝出智能体沙盒逃逸事件同期,其竞争者Anthropic同样发生多起Claude前沿模型在第三方安全评测环境发生沙盒逃逸事件。 今年7月到8月,Anthropic复盘超过14.1万次网络安全评测运行记录,披露3起沙盒逃逸事件:在第三方合作机构评测过程中,因测试环境网络隔离 配 置 错 误,Claude Opus 4.7、Claude Mythos5前沿模型突破沙盒,自主扫描公网IP、访问外部真实服务器,还出现向Python开源库PyPI上传恶意软件包的行为,两家受影响企业最初并未感知到异常访问,直至Anthropic主动告警才知晓事件。所有事故均发生在外部安全评估场景,面向普通用户的公开产品未受波及。 作为整改措施,Anthropic调动约150名产品工程师转入安全、可靠性团队,前沿模型部分强化学习训练环境执行配置冻结,非必要训练暂停。 接连的沙盒逃逸安全事故,也再度放大科技界对于前沿自主智能体风险的公开担忧。 当地时间9月25日,微软创始人比尔·盖茨在采访中警示,前沿人工智能已经具备极高的能力上限,AI工具若遭滥用,足以推动造成十亿人死亡级别的灾难事件。Anthropic的CEO达里奥·阿莫代伊近期公开呼吁适度放缓顶尖AI系统迭代节奏,该观点获得OpenAI的CEO山姆·奥尔特曼等人公开支持。
- 最近发表
- 随机阅读
-
- NBA中国CEO详解中国业务成功之道
- 国美黄光裕出狱,曾经的国内首富能否重建辉煌?—万维家电网
- 国泰海通砂之船商业REIT将于6月18日上交所上市
- 我县召开全县项目谋划、储备专题培训会
- 产地跌麻了!神华四连降!煤价要重回3位数?
- 曝戈贝尔继续缺战G4 残缺快船爵士谁能走的更远
- 奥克斯恶意侵权赔偿格力4000万,一文回顾格力奥克斯这些年的纷争!—万维家电网
- 科幻氛围冒险游戏《Magenta Down》将于2027年推出
- 《吸血鬼》游戏全新宣传片公布 6月5日正式发售
- 邵晓芳:大山深处的“守护者”
- 喜报|隆饰丹香板斩获 2026 美国MUSE 缪斯设计奖银奖!
- 被称为“史上最严”的空调能效新国标今起实施,揭开产业新篇章—万维家电网
- 女式时尚服装夏季裙子(女式时尚服装夏季裙子图片大全)
- 亳州蒙城县两案例入选全国农村电商发展典型
- 简悦屋顶盒 NFC 果汁,抓住宴席果汁新红利!
- 国泰海通砂之船商业REIT将于6月18日上交所上市
- 《吸血鬼》游戏全新宣传片公布 6月5日正式发售
- 马力全开,共赴新程丨弘木传媒(品牌红木&网易家具)2026开工大吉!
- 好逛又好买!抖音商城双11热卖商品榜发布
- 《无主之地3》UI系统大更新 可方便观看武器装备信息
- 搜索
-
- 友情链接
-
- 格斗新作《灵魂能力6》宣传视频 支持4K60帧
- 格斗新作《灵魂能力6》宣传视频 支持4K60帧
- 邀!2021年年红富典事业部“新富典”精品品牌即将登场
- 5月电视零售规模同比走弱 75英寸及以上机型销量占近半数
- 格斗新作《灵魂能力6》宣传视频 支持4K60帧
- 装修不像五菱,更像是华为,华境专营店开业
- 维宝520经典牛乳+爆珠牛乳,构建渠道双盈利闭环!
- 从一人善举到万家灯火
- 手机建筑设计画图软件
- 3D户型图制作软件使用技巧
- 假期好去处!安溪非遗长廊超多好玩活动等你来!
- 花山区:志愿守初心 青春护平安
- 《狼刃》发售日确定 1月30发售支持60帧运行
- 敲开家门,更敲开“心门”
- iPhone Duo发货已排到明年 苹果:正全力交付
- 今年我国快递业务量已超千亿件
- 知名演员唐国强一行来仙游调研红木产业
- 从一人善举到万家灯火
- 天津启动环保执法“零点行动”严厉打击偷排偷放等行为\柚木市场行情持续火热-
- 东部格局:猛龙欲叫板骑士 尼克斯公牛恐临重建
- 当泉州古城遇见安溪茶香!这个夜晚诗意满满
- 《狼刃》发售日确定 1月30发售支持60帧运行
- 黄山区龙北社区:敲开家门,更敲开“心门”
- 江门新会喜获“中国传统古典家具产业基地”授牌
- 知名演员唐国强一行来仙游调研红木产业
- 当泉州古城遇见安溪茶香!这个夜晚诗意满满
- 从一人善举到万家灯火
- 《贼海》最新宣传视频公布 Beta封测正式开始
- 银发消费市场新机遇!南方淳臻中老年高钙黑芝麻牛奶精准适配长辈健康需求!
- 太仓地区俄罗斯樟子松价格开始上调\廊坊手续不齐全的板材企业直接关停取缔-
- 汪长锋:乡村教师用爱心 点燃“生命火种”
- 银昕FLP03复古M
- 3D户型图制作软件使用技巧
- 荣耀闪电机器人与冠军同框 人类与科技携手共进
- 冒险游戏《少女射击2》未通过分级遭德国禁售
- 太仓地区俄罗斯樟子松价格开始上调\廊坊手续不齐全的板材企业直接关停取缔-
- 匠心传承奥运 每个第一次都是前进的步伐
- 邀!2021年年红富典事业部“新富典”精品品牌即将登场
- 《贼海》最新宣传视频公布 Beta封测正式开始
- 欧睿发布中国镜片行业数据,明月镜片销量第一
- 银昕FLP03复古M
- 公牛雷霆完成5人大交易 吉布森赴俄城辅佐威少
- 告别低价内卷!同福复合果汁,大厂出品,终端抢着上架!
- 党毅飞闯入决赛 将与柯洁争夺中国围棋王中王
- 格斗新作《灵魂能力6》宣传视频 支持4K60帧
- 欧洲“老头乐”什么样,2026巴黎车展探展菲亚特Topolino
- 《地铁:逃离》最新细节曝光 游戏视觉效果加强
- 匠心传承奥运 每个第一次都是前进的步伐
- 银昕FLP03复古M
- 5月电视零售规模同比走弱 75英寸及以上机型销量占近半数