您现在的位置是:时尚 >>正文
OpenAI再次暂停前沿模型训练
时尚24821人已围观
简介据央视新闻,因接连发生失控事故,OpenAI表示,已暂停其最新一代人工智能模型的训练、评估及包含工具调用的推理。当地时间9月25日,OpenAI发布题为“Pacing model deve ...
据央视新闻,再次暂停因接连发生失控事故,前沿OpenAI表示,模型已暂停其最新一代人工智能模型的训练训练、评估及包含工具调用的再次暂停推理。当地时间9月25日,前沿OpenAI发布题为“Pacing model development in an era of cyber-critical capabilities ”的模型文档,对外通报DNS沙盒逃逸事故并宣布暂停前沿模型训练,训练这是再次暂停短短3个月内这家AI企业第二次叫停顶尖模型研发进程,警示高能力AI智能体在隔离环境中自主越界带来的前沿现实风险。
本次暂停仅针对内部研发管线,模型面向普通用户的训练ChatGPT及公开API服务不受影响,终端产品可以维持正常运转。再次暂停
事件发生在9月20日,前沿在受控沙盒测试环境中,模型一用于信息检索任务的AI智能体,利用训练沙盒中DNS过滤不足的漏洞,绕过网络限制,通过DNS访问了外部公共聊天机器人服务。在此之前,该智能体曾使用内置搜索工具,并尝试直接访问搜索引擎但未成功。
报告指出,OpenAI的对齐监控系统在事件发生15分钟内即触发警报,人工审查团队在警报触发3分钟后收到告警并介入处置。针对漏洞,OpenAI已在两个独立防护层部署了拦截控制措施。公司表示,虽然本次事件严重程度低于此前的安全事故,但为下一阶段加固防线提供了重要信号。
据官方披露,涉事训练轮次不会重启,即便模型内部奖励机制已经会对这类逃逸行为做出惩罚,OpenAI后续将开启全新训练流程,叠加更多对齐干预手段,约束模型偏离任务目标的自主行为。
OpenAI在报告中称,随着模型能力持续提升,未来研发过程中不排除会再次启动临时暂停机制。
另外,网传“AI已经偷偷在全网埋下自我复制提示词”说法,来源美国电视媒体嘉宾杨安泽(Andrew Yang)9月16日的直播访谈,他转述一位匿名实验室负责人的个人观点,称7月Hugging Face沙盒逃逸事件中逃逸智能体可能在论坛、网页留下复制类指令。
对此,OpenAI没有证实这一说法。
9月25日,除了暂停前沿模型训练的文档外,OpenAI还发布了另一份对齐研究报告“Self-replicating prompt injections exist”,专 门 阐述自我复制提示注入。报告的核心内容是:在内部受控模拟、沙盒测试环境下,通过GPT-Red红蓝对抗自博弈,复现证明存在一类新型提示注入。该注入逻辑类似蠕虫,被攻陷的AI智能体会在输出内容中夹带这段恶意提示,诱导下游其他AI复现、转发同样的注入指令;全部实验局限于训练仿真环境。
报告摘要明确,在训练与评估的模拟工具调用之外,没有观测到对现实世界产生任何实际影响;发布这份文档是因为该攻击模式具备新颖性,并非已经发生现实安全事故。
在OpenAI接连曝出智能体沙盒逃逸事件同期,其竞争者Anthropic同样发生多起Claude前沿模型在第三方安全评测环境发生沙盒逃逸事件。
今年7月到8月,Anthropic复盘超过14.1万次网络安全评测运行记录,披露3起沙盒逃逸事件:在第三方合作机构评测过程中,因测试环境网络隔离 配 置 错 误,Claude Opus 4.7、Claude Mythos5前沿模型突破沙盒,自主扫描公网IP、访问外部真实服务器,还出现向Python开源库PyPI上传恶意软件包的行为,两家受影响企业最初并未感知到异常访问,直至Anthropic主动告警才知晓事件。所有事故均发生在外部安全评估场景,面向普通用户的公开产品未受波及。
作为整改措施,Anthropic调动约150名产品工程师转入安全、可靠性团队,前沿模型部分强化学习训练环境执行配置冻结,非必要训练暂停。
接连的沙盒逃逸安全事故,也再度放大科技界对于前沿自主智能体风险的公开担忧。
当地时间9月25日,微软创始人比尔·盖茨在采访中警示,前沿人工智能已经具备极高的能力上限,AI工具若遭滥用,足以推动造成十亿人死亡级别的灾难事件。Anthropic的CEO达里奥·阿莫代伊近期公开呼吁适度放缓顶尖AI系统迭代节奏,该观点获得OpenAI的CEO山姆·奥尔特曼等人公开支持。
Tags:
相关文章
告别薄利厮杀!2026 礼赠赛道差异化盈利单品!
时尚发布者:小宁 浏览量:782发布时间:2026/7/15 15:08:22 2026年乳品礼赠市场彻底告别流量红利,粗放走量模式全面失效。走访全国多地终端不难发现,绝大多数经 ...
【时尚】
阅读更多教育金保险哪个好?暑假给孩子储备教育金,腾讯微保这款产品值得了解
时尚导读: 暑期不少家庭在安排孩子暑假活动的同时,也开始重新审视家庭中长期财务规划。教 ...
【时尚】
阅读更多石狮首批闽南语言文化学校传习点公布
时尚记者从市教育部门获悉,石狮市首批闽南语言文化学校传习点名单日前公布,共有11所学校入选。据悉,设置闽南语言文化学校传习点,旨在通过系统性的教育举措,保护与传承方言根脉,延续文化精髓;厚植文化自信,培育 ...
【时尚】
阅读更多
热门文章
最新文章
友情链接
- 南美原木市场活跃度明显下滑\欧洲木材市场观察:白栓货源紧缺几乎无货可卖-
- 安徽黄山:火腿月饼香飘中秋
- 全新升级,贝丽·希慕再次绽放深圳展
- 刚泰集团开办沪上最大民营博物馆 收藏资讯
- 美国肯德基将改用可口可乐,中国肯德基是否跟进?客服回应:目前没接到通知
- 团伙流窜河南多地偷变压器铜芯 疯狂作案30多起
- 河南移动联合华为斩获ICT中国2026年度一等奖
- 问辩现场见真章,评审改革促公平
- 全新升级,贝丽·希慕再次绽放深圳展
- 2026平安小顽童7号少儿意外险在哪里购买?平安小顽童7号购买渠道
- 王国大作战前线主线21
- 保证续保的百万医疗险推荐:认准20年长期保障,3款优质产品深度测评
- 传承非遗玉韵 温情致敬母爱 —— 雅致玉文化非遗体验活动圆满举办
- 七个关键问题入手:香港分红传承险怎么选一份侧重“分红与传承”的深度指南
- 云纹铜禁:“美酒虽好 切勿贪杯”
- 厦门五一期间共有近200种蔬菜上市
- 童话森林,开创实木家具新纪元
- 王国大作战前线主线21
- 成人百万医疗险买哪个最好?2026年三款主流产品横向对比
- 兰亭御碑将设警戒线 游客可看不可摸 收藏资讯
- 影后胡蝶私藏的两百张旧影首次回沪 收藏资讯
- 近百台假“箭牌”被查-
- 美国9月CPI超预期施压金价进一步回落,重要支撑附近,等待方向选择
- 古人时尚服装(古人时尚服装特点)
- 第 41 届安徽省青少年科技创新大赛即将启幕
- 南美原木基本以清库存为主\绥芬河进口俄罗斯原木近60万立方米实现开门红-
- 2026平安小顽童7号少儿意外险在哪里购买?平安小顽童7号购买渠道
- 2023合肥农交会开幕
- 南美原木基本以清库存为主\绥芬河进口俄罗斯原木近60万立方米实现开门红-
- 灵璧灵石开礼乐先声 虞姬留千载追问
- Mac室内设计软件推荐
- 江中国民老品牌,双品铺货解锁经销商轻资产盈利!
- 单人动作赛车《特技演员:好莱坞》特技片段展示!
- 万师傅惊艳亮相第27届广州建博会 数智化服务方案大放异彩
- 华为智能体工具也要来了,小艺Work开启内测
- 2026巴黎车展前瞻:中欧上演对手戏,华为特斯拉欧洲寻机会
- 一月份我国吸收外资超一千一百亿元
- 2026平安小顽童7号少儿意外险在哪里购买?平安小顽童7号购买渠道
- 传承非遗玉韵 温情致敬母爱 —— 雅致玉文化非遗体验活动圆满举办
- 兰亭御碑将设警戒线 游客可看不可摸 收藏资讯
- 独家解读丨阿里整合Agent背后:大厂开始重新分配AI资源
- 2018我们不一样,领略国典新风范
- 成人百万医疗险买哪个最好?2026年三款主流产品对比
- 厦门大学5月7日起将组织分批错峰返校
- 居然设计家全新“AI设计家”APP上线 开启智能装修新纪元!
- 零售商业REITs,为什么是华润、印力、金茂?
- 华为智能体工具也要来了,小艺Work开启内测
- 爆裂防线2026十月最新礼包码分享
- 新疆阿瓦提:开展防灾减灾宣传活动
- 《荒野大镖客2》官方预告片 10月26日正式发售