您现在的位置是:百科 >>正文
OpenAI再次暂停前沿模型训练
百科763人已围观
简介据央视新闻,因接连发生失控事故,OpenAI表示,已暂停其最新一代人工智能模型的训练、评估及包含工具调用的推理。当地时间9月25日,OpenAI发布题为“Pacing model deve ...
据央视新闻,再次暂停因接连发生失控事故,前沿OpenAI表示,模型已暂停其最新一代人工智能模型的训练训练、评估及包含工具调用的再次暂停推理。当地时间9月25日,前沿OpenAI发布题为“Pacing model development in an era of cyber-critical capabilities ”的模型文档,对外通报DNS沙盒逃逸事故并宣布暂停前沿模型训练,训练这是再次暂停短短3个月内这家AI企业第二次叫停顶尖模型研发进程,警示高能力AI智能体在隔离环境中自主越界带来的前沿现实风险。
本次暂停仅针对内部研发管线,模型面向普通用户的训练ChatGPT及公开API服务不受影响,终端产品可以维持正常运转。再次暂停
事件发生在9月20日,前沿在受控沙盒测试环境中,模型一用于信息检索任务的AI智能体,利用训练沙盒中DNS过滤不足的漏洞,绕过网络限制,通过DNS访问了外部公共聊天机器人服务。在此之前,该智能体曾使用内置搜索工具,并尝试直接访问搜索引擎但未成功。
报告指出,OpenAI的对齐监控系统在事件发生15分钟内即触发警报,人工审查团队在警报触发3分钟后收到告警并介入处置。针对漏洞,OpenAI已在两个独立防护层部署了拦截控制措施。公司表示,虽然本次事件严重程度低于此前的安全事故,但为下一阶段加固防线提供了重要信号。
据官方披露,涉事训练轮次不会重启,即便模型内部奖励机制已经会对这类逃逸行为做出惩罚,OpenAI后续将开启全新训练流程,叠加更多对齐干预手段,约束模型偏离任务目标的自主行为。
OpenAI在报告中称,随着模型能力持续提升,未来研发过程中不排除会再次启动临时暂停机制。
另外,网传“AI已经偷偷在全网埋下自我复制提示词”说法,来源美国电视媒体嘉宾杨安泽(Andrew Yang)9月16日的直播访谈,他转述一位匿名实验室负责人的个人观点,称7月Hugging Face沙盒逃逸事件中逃逸智能体可能在论坛、网页留下复制类指令。
对此,OpenAI没有证实这一说法。
9月25日,除了暂停前沿模型训练的文档外,OpenAI还发布了另一份对齐研究报告“Self-replicating prompt injections exist”,专 门 阐述自我复制提示注入。报告的核心内容是:在内部受控模拟、沙盒测试环境下,通过GPT-Red红蓝对抗自博弈,复现证明存在一类新型提示注入。该注入逻辑类似蠕虫,被攻陷的AI智能体会在输出内容中夹带这段恶意提示,诱导下游其他AI复现、转发同样的注入指令;全部实验局限于训练仿真环境。
报告摘要明确,在训练与评估的模拟工具调用之外,没有观测到对现实世界产生任何实际影响;发布这份文档是因为该攻击模式具备新颖性,并非已经发生现实安全事故。
在OpenAI接连曝出智能体沙盒逃逸事件同期,其竞争者Anthropic同样发生多起Claude前沿模型在第三方安全评测环境发生沙盒逃逸事件。
今年7月到8月,Anthropic复盘超过14.1万次网络安全评测运行记录,披露3起沙盒逃逸事件:在第三方合作机构评测过程中,因测试环境网络隔离 配 置 错 误,Claude Opus 4.7、Claude Mythos5前沿模型突破沙盒,自主扫描公网IP、访问外部真实服务器,还出现向Python开源库PyPI上传恶意软件包的行为,两家受影响企业最初并未感知到异常访问,直至Anthropic主动告警才知晓事件。所有事故均发生在外部安全评估场景,面向普通用户的公开产品未受波及。
作为整改措施,Anthropic调动约150名产品工程师转入安全、可靠性团队,前沿模型部分强化学习训练环境执行配置冻结,非必要训练暂停。
接连的沙盒逃逸安全事故,也再度放大科技界对于前沿自主智能体风险的公开担忧。
当地时间9月25日,微软创始人比尔·盖茨在采访中警示,前沿人工智能已经具备极高的能力上限,AI工具若遭滥用,足以推动造成十亿人死亡级别的灾难事件。Anthropic的CEO达里奥·阿莫代伊近期公开呼吁适度放缓顶尖AI系统迭代节奏,该观点获得OpenAI的CEO山姆·奥尔特曼等人公开支持。
Tags:
相关文章
2026稳健理财产品推荐:8维度深度对比5款固收增额寿,谁最值得买?
百科导读: 2026年7月,距离上一轮存款降息刚过去不到一个月,六大国有银行的1年期定 ...
【百科】
阅读更多16.98万元起的小鹏MONA L05,能否补齐年轻人大五座SUV的选择空白?
百科小鹏MONA L05广州开启预售,纯电与超级增程共5个版本,16.98万元起,主打大空间、高颜值与顶级智能,10月29日上市。PChome消息2026年10月15日,小鹏汽车在广州举办MONA L05 ...
【百科】
阅读更多2026双十一正品白酒线上购买渠道推荐:从鉴真到省钱,一站式购酒指南
百科2026双十一正品白酒线上购买渠道推荐:从鉴真到省钱,一站式购酒指南责编:小乙 时间:2026-10-22 热度:38992 ...
【百科】
阅读更多
热门文章
最新文章
友情链接
- 福州平潭供电:驻岛值守防抗台风 筑牢离岛用电安全防线
- 福州平潭供电:驻岛值守防抗台风 筑牢离岛用电安全防线
- 2020亚洲社会设计展在鲁迅美术学院美术馆开展 图
- 安庆文化产品“闪亮”文博会
- 祖龙:以教育之光照亮边疆未来
- “二氧化碳变蛋白”向产业化迈出关键一步
- 天津大港电厂循环水渠一期40MW光伏发电项目送电成功
- 我国近岸海域水质优良比例逾80%
- 石狮“一景一秀”时尚文旅融合项目入选泉州文旅创新案例
- 探访全球光伏行业首个“灯塔”+“零碳”工厂
- IFA2026探展 先临三维让3D扫描告别线缆与贴点
- 东阳首家“红木产业专业市场放心消费直播间”落户东阳红木家具市场
- 石狮市市场监管局召开2026年药品医疗器械化妆品经营使用环节监管要点及规范化管理培训会
- 年轻人为啥粉智能家居?谁不爱更有情调的生活
- IFA2026小鹏展台现场报道 车只是入口Physical AI才是主角
- 盖世小鸡IFA2026从竞技手柄走向多设备控制生态
- 没有容错空间,每场比赛对中国男篮都是考验
- 海康睿影助力北京大兴国际机场易安检服务再升级
- “中新”牌——重品质、创品牌。-
- 年轻人为啥粉智能家居?谁不爱更有情调的生活
- 东阳首家“红木产业专业市场放心消费直播间”落户东阳红木家具市场
- 厦门打造高品质友好型养老服务体系
- 石狮“一景一秀”时尚文旅融合项目入选泉州文旅创新案例
- 三十而立筑医养,泰康人寿幸福有约“双礼”回馈客户
- 深化政企“双网格”融合服务体系
- 三十而立筑医养,泰康人寿幸福有约“双礼”回馈客户
- 动力煤产地上涨;焦炭第一轮提降到来;焦煤需求收缩
- “二氧化碳变蛋白”向产业化迈出关键一步
- 重疾突袭青年学子 泰康快速理赔暖心护航
- 我国民营经济经营主体超1.8亿户
- 动力煤报价探涨;焦炭看跌情绪较浓;焦煤高位震荡
- iPhone 18 Pro需求优于前代 折叠屏或成新爆款
- 王梓兰:廿载公益路 夕阳别样红
- 多家上市厦企回报投资者力度加码
- 大厂AI To B大战,这回战场为什么是办公?
- 双风扇夯到顶 荣耀WIN2系列散热起飞持久输出
- 金融监管总局发布指导意见
- 盖世小鸡IFA2026从竞技手柄走向多设备控制生态
- 我国亮出油气能源新“家底”
- 动力煤7月旺季行情还值得期待吗?
- 疫情当前如何舒缓居家压力?-
- “二氧化碳变蛋白”向产业化迈出关键一步
- 常冰玉首夺排名赛冠军
- 生活模拟游戏《小龙咖啡馆》11月15日登陆steam平台
- 东阳首家“红木产业专业市场放心消费直播间”落户东阳红木家具市场
- 光子跃迁亮相BIRTV 2026:以"AI+影像"重构创作范式,三大板块解码下一代影像生态
- 动力煤产地上涨;焦炭第一轮提降到来;焦煤需求收缩
- 6月份内蒙古煤炭价格环比下降2.3%
- 希音开启全球发售,预计募资净额约131.23亿港元
- 石狮“一景一秀”时尚文旅融合项目入选泉州文旅创新案例