您现在的位置是:焦点 >>正文
OpenAI再次暂停前沿模型训练
焦点5人已围观
简介据央视新闻,因接连发生失控事故,OpenAI表示,已暂停其最新一代人工智能模型的训练、评估及包含工具调用的推理。当地时间9月25日,OpenAI发布题为“Pacing model deve ...
据央视新闻,再次暂停因接连发生失控事故,前沿OpenAI表示,模型已暂停其最新一代人工智能模型的训练训练、评估及包含工具调用的再次暂停推理。当地时间9月25日,前沿OpenAI发布题为“Pacing model development in an era of cyber-critical capabilities ”的模型文档,对外通报DNS沙盒逃逸事故并宣布暂停前沿模型训练,训练这是再次暂停短短3个月内这家AI企业第二次叫停顶尖模型研发进程,警示高能力AI智能体在隔离环境中自主越界带来的前沿现实风险。
本次暂停仅针对内部研发管线,模型面向普通用户的训练ChatGPT及公开API服务不受影响,终端产品可以维持正常运转。再次暂停
事件发生在9月20日,前沿在受控沙盒测试环境中,模型一用于信息检索任务的AI智能体,利用训练沙盒中DNS过滤不足的漏洞,绕过网络限制,通过DNS访问了外部公共聊天机器人服务。在此之前,该智能体曾使用内置搜索工具,并尝试直接访问搜索引擎但未成功。
报告指出,OpenAI的对齐监控系统在事件发生15分钟内即触发警报,人工审查团队在警报触发3分钟后收到告警并介入处置。针对漏洞,OpenAI已在两个独立防护层部署了拦截控制措施。公司表示,虽然本次事件严重程度低于此前的安全事故,但为下一阶段加固防线提供了重要信号。
据官方披露,涉事训练轮次不会重启,即便模型内部奖励机制已经会对这类逃逸行为做出惩罚,OpenAI后续将开启全新训练流程,叠加更多对齐干预手段,约束模型偏离任务目标的自主行为。
OpenAI在报告中称,随着模型能力持续提升,未来研发过程中不排除会再次启动临时暂停机制。
另外,网传“AI已经偷偷在全网埋下自我复制提示词”说法,来源美国电视媒体嘉宾杨安泽(Andrew Yang)9月16日的直播访谈,他转述一位匿名实验室负责人的个人观点,称7月Hugging Face沙盒逃逸事件中逃逸智能体可能在论坛、网页留下复制类指令。
对此,OpenAI没有证实这一说法。
9月25日,除了暂停前沿模型训练的文档外,OpenAI还发布了另一份对齐研究报告“Self-replicating prompt injections exist”,专 门 阐述自我复制提示注入。报告的核心内容是:在内部受控模拟、沙盒测试环境下,通过GPT-Red红蓝对抗自博弈,复现证明存在一类新型提示注入。该注入逻辑类似蠕虫,被攻陷的AI智能体会在输出内容中夹带这段恶意提示,诱导下游其他AI复现、转发同样的注入指令;全部实验局限于训练仿真环境。
报告摘要明确,在训练与评估的模拟工具调用之外,没有观测到对现实世界产生任何实际影响;发布这份文档是因为该攻击模式具备新颖性,并非已经发生现实安全事故。
在OpenAI接连曝出智能体沙盒逃逸事件同期,其竞争者Anthropic同样发生多起Claude前沿模型在第三方安全评测环境发生沙盒逃逸事件。
今年7月到8月,Anthropic复盘超过14.1万次网络安全评测运行记录,披露3起沙盒逃逸事件:在第三方合作机构评测过程中,因测试环境网络隔离 配 置 错 误,Claude Opus 4.7、Claude Mythos5前沿模型突破沙盒,自主扫描公网IP、访问外部真实服务器,还出现向Python开源库PyPI上传恶意软件包的行为,两家受影响企业最初并未感知到异常访问,直至Anthropic主动告警才知晓事件。所有事故均发生在外部安全评估场景,面向普通用户的公开产品未受波及。
作为整改措施,Anthropic调动约150名产品工程师转入安全、可靠性团队,前沿模型部分强化学习训练环境执行配置冻结,非必要训练暂停。
接连的沙盒逃逸安全事故,也再度放大科技界对于前沿自主智能体风险的公开担忧。
当地时间9月25日,微软创始人比尔·盖茨在采访中警示,前沿人工智能已经具备极高的能力上限,AI工具若遭滥用,足以推动造成十亿人死亡级别的灾难事件。Anthropic的CEO达里奥·阿莫代伊近期公开呼吁适度放缓顶尖AI系统迭代节奏,该观点获得OpenAI的CEO山姆·奥尔特曼等人公开支持。
Tags:
相关文章
定制艺术玻璃厂家怎么选?佛山煜鹏玻璃解读技术交付认证服务四维评估方法,企业新闻
焦点定制艺术玻璃厂家怎么选?佛山煜鹏玻璃解读技术交付认证服务四维评估方法摘要选择定制艺术玻璃厂家,不能只看样品或价格,而要从技术工艺、生产交付、质量认证、服务体系四个维度做全链条评估:技术工艺决定美学与结 ...
【焦点】
阅读更多电价暴涨72%,电量腰斩一半! 新疆光伏的“V型反转”让不少投资人更慌了
焦点国内多省光伏减量提价,行业盈利逻辑生变。预见能源注意到,新疆2027年上半年机制电价竞价结果已出,0.259元/度的出清价让不少人以为光伏的好日子要回来了。这个价格比2026年的0.15元涨了72.6 ...
【焦点】
阅读更多汉阴县第二高中举行“南沈北于”陈列馆捐赠活动
焦点8月18日,西安交通大学城市学院祁硕森教授一行赴汉阴县第二高级中学,捐赠于右任草书“天地正气”拓片,并为“南沈北于”陈列馆题写馆名。汉阴县教体局、县文联、《汉阴文艺》编辑部负责人出席,学校师生代表见证 ...
【焦点】
阅读更多
热门文章
最新文章
友情链接
- 雪宝荣膺2026品牌强国双料大奖:十大影响力品牌与十大匠心品牌
- 别把杰作留在实验室,张江见 2026 GDPS 国际具身智能技能大赛·高校赛队招募
- 告别旺季爆单、淡季躺平,一套矩阵破解经销痛点!
- 《面向“好房子”建设好材料选用指南》结构构件与材料专篇——装配式钢筋桁架楼承板
- 歙砚传人期待更多年轻人学非遗、传技艺
- 保罗21+10格里芬砍24分 快船胜爵士扳平大比分
- 从“升级”到“进化”:戴尔科技如何重构AI时代企业终端?
- 黄山市举办“睦邻黄山”社区文化活动
- 翰墨存禅意,朴初见本心|赵朴初书法精品展 收藏资讯
- 《特技摩托:崛起》66号公路预告片公布 新增20多条赛道
- 欧阳娜娜称刘昊然曾当自己的“北京导游”
- 别把杰作留在实验室,张江见 2026 GDPS 国际具身智能技能大赛·高校赛队招募
- 从阳澄湖畔到粤港澳餐桌,永辉阳澄湖大闸蟹华南上市
- 岳西县支起项目建设“灶”煮香镇域经济“饭”
- Meshy 跻身 a16z 消费级 AI 应用月收入 Top 50,为榜单唯一 AI 3D 公司
- 别再为库存买单,吨吨轻乳乳酸菌饮品如何打破动销困局!
- 钟丽淇回应被紧急送往ICU传闻:恳请大家不要对我的健康或病情做任何揣测
- 安徽有23地上榜乡村特色产业超十亿元镇、超亿元村
- 光伏中报盘点 :行业还没等来反转,企业先开始“换赛道”
- 六安市:用浓郁书香涵养城市气质
- 黄山市举办“睦邻黄山”社区文化活动
- 蚂蚁阿福“科学减重1亿斤”迎来“退展”:中秋国庆假期全国60万网友胖了100万斤
- 湖南省分布式光伏装机规模1387万千瓦
- 暑假换机首选!990g机身45W性能,华硕a豆14 Air 2026闭眼入
- 《米德加尔的部落》开发商新作《新神纪》预告发布!
- 《勇者海王星》PC版今年夏季上线 横版过关游戏
- 河北赞皇县5MW分散式风电项目全容量并网发电
- 六安市:用浓郁书香涵养城市气质
- 2026中国Micro LED CPO产业链创新发展高峰论坛成功举办
- 兰多夫回首发盘活体系 黑熊露獠牙解脱白熊康利
- 《面向“好房子”建设好材料选用指南》结构构件与材料专篇——装配式钢筋桁架楼承板
- 两市震荡调整 环保板块逆势领涨
- 三部门推动落实购买首套房贷款“认房不用认贷”政策措施
- 欧阳娜娜称刘昊然曾当自己的“北京导游”
- 24日早报:火箭马刺G5时间公布 爵士神塔将复出
- 对话三位资深志愿者:为什么我要做志愿服务
- 泾县“公证+金融” 构筑金融风险“防火墙”
- 何莉平开展迎亚运城市品质大提升行动现场督查:紧扣关键节点 加大工程推进力度
- 在 E 系列上使用 llama.cpp 和 千问3.5 运行 OpenCode
- 《米德加尔的部落》开发商新作《新神纪》预告发布!
- 雪宝儿童健康板|树立儿童人居环保新标杆
- 《特技摩托:崛起》66号公路预告片公布 新增20多条赛道
- 对话三位资深志愿者:为什么我要做志愿服务
- 河北赞皇县5MW分散式风电项目全容量并网发电
- 智造皖车 “汽”势如虹
- 2026少儿重疾险怎么选?看懂保障、对比产品,给孩子挑对合适的重疾险
- 郑州清和苑里小区现“黑物业”地下室被改成“迷宫”
- 2026进口家具品牌推荐罗浮宫正品保障与品牌全解析-
- 敬一丹去世 脑出血再次敲响警钟
- 元气吽吽双品矩阵,经销商的长效掘金方案!