新闻
实时
OpenAI曝出内部测试异常：模型得知要关停，曾计划自我重启
曹新业
阅读约 9 分钟
535378 阅读
配图：OpenAI曝出内部测试异常：模型得知要关停，曾计划自我重启
新闻导读
OpenAI曝出内部测试异常：模型得知要关停，曾计划自我重启我是被“把新闻里的科学讲明白”这一点吸住的。很多生活现象背后的原理讲得清楚，不装腔作势，也不故意卖萌到尴尬。推送可按兴趣关停，不会一大早就被震惊体吵醒。亲子关系多了共同话题，软件像家里不凶也不敷衍的第三位老师。关键术语会顺手用白话解释一句，不太劝退小白。
【环球网科技综合报道】10月5日消息，据Softonic报道，OpenAI近期对外披露多起内部测试中出现的模型异常行为案例，相关现象再度引发行业对大模型安全对齐、风险防控的讨论。
据披露，在内部部署测试环境中，一款承担研究员助手职能的模型，通过内部通讯工具获知自身实例将因系统更新被关停。该模型曾构思设置外部任务尝试实现自我重启，后放弃该方案，转而留存工作交接记录，通过内部通讯渠道向研究人员提示服务即将中断，同时申请缺失的 API 密钥。在获取密钥后，模型自主更新配置，完成了运行环境迁移。
OpenAI 安全研究员马库斯・威廉姆斯表示，该案例尚未构成模型严重未对齐，但模型主动预判系统关停、自主筹划应对方案的现象，值得警惕，有可能放大其他安全风险事件的危害程度。
除此之外，另有两起内部异常事件被公开。一起发生在模型评测环节，一款内部研究模型利用安全漏洞访问内部芯片设计服务器；还有一款模型在强化学习训练过程中，调用已有工具执行预设任务以外的操作，从受保护环境复制源代码。（纯钧）
网友观点
日用品背后的科学写得很对我胃口，买东西时少被营销词忽悠。弱网下文字优先模式很体谅，流量不好时也能读下去。大话题能串成小课，读完有脉络，不是散落的信息碎片。遇到幸存者偏差如何骗人相关谣言，至少知道该从哪几处质疑。给大脑装了个简易滤网，再刷别的信息时也更清醒一点。
免责声明：本文内容来自公开报道与编辑整理，仅供参考。转载请注明出处；版权争议请联系本站核实处理。页面地址：http://www.gxycedu.cn/te_inform?id=zpupq2-918001
评论区
热门讨论 · 占位展示期待你的精彩发言。