CNTXJ.NET | 通信界-中国通信门户 | 通信圈 | 通信家 | 下载吧 | 说吧 | 人物 | 前瞻 | 智慧(区块链 | AI
 国际新闻 | 国内新闻 | 运营动态 | 市场动态 | 信息安全 | 通信电源 | 网络融合 | 通信测试 | 通信终端 | 通信政策
 专网通信 | 交换技术 | 视频通信 | 接入技术 | 无线通信 | 通信线缆 | 互联网络 | 数据通信 | 通信视界 | 通信前沿
 智能电网 | 虚拟现实 | 人工智能 | 自动化 | 光通信 | IT | 6G | 烽火 | FTTH | IPTV | NGN | 知本院 | 通信会展
您现在的位置: 通信界 >> 国际新闻 >> 新闻正文
 
首次!不听人类指挥,AI模型拒绝关闭!马斯克评论:令人担忧......
[ 通信界 | 杜宇 | www.cntxj.net | 2025/5/28 9:10:54 ]
 

据央视新闻5月26日消息,当地时间5月25日,英国《每日电讯报》报道,美国开放人工智能研究中心(OpenAI)公司新款人工智能(AI)模型o3不听人类指令,拒绝自我关闭。

报道说,人类专家在测试中给o3下达明确指令,但o3篡改计算机代码以避免自动关闭。

图片来源:央视新闻图片来源:央视新闻

o3模型是OpenAI“推理模型”系列的最新版本,旨在为ChatGPT提供更强大的问题解决能力。OpenAI曾称o3为“迄今最聪明、最高能”的模型。

美国AI安全机构帕利塞德研究所说,o3破坏关闭机制以阻止自己被关闭,“甚至在得到清晰指令时”

这家研究所说:“据我们所知,这是AI模型首次被发现在收到清晰指令后阻止自己被关闭。”

帕利塞德研究所5月24日公布上述测试结果,但称无法确定o3不服从关闭指令的原因。

此外,OpenAI5月26日宣布,已在韩国设立实体并将在韩国首都首尔设立分支。OpenAI提供的数据显示,韩国ChatGPT付费用户数量仅次于美国。

美国彭博新闻社报道,这将是OpenAI在亚洲设立的第三个分支。前两个分支分别设在日本和新加坡。

据公开资料,OpenAI于今年1月发布了新的推理模型o3系列的mini版本,并于4月正式推出o3模型。OpenAI称推出的o3和o4-mini是公司最智能、最强大的型号。据介绍,在外部专家评估中,o3面对困难现实任务时,犯的重大错误比前一代的o1少了20%;在数学能力AIME 2025基准测试中,o3得分88.9,超过o1的79.2;在代码能力Codeforce基准测试中,o3得分2706,超过o1的1891。o3的视觉思考能力也比前一代模型有明显提升。

图片来源:OpenAI图片来源:OpenAI

OpenAI此前称,对于o3和o4-mini,公司重新构建了安全培训数据,在生物威胁、恶意软件生产等领域增添了新的拒绝提示,这使得o3和o4-mini在公司内部的拒绝基准测试中取得了出色的表现。公司用了最严格的安全程序对这两个型号的AI模型进行了压力测试,在生物和化学、网络安全和AI自我改进三个能力领域评估了o3和o4-mini,确定这两个模型低于框架中的“高风险”阈值。

OpenAI所开发大模型的安全性此前曾受到广泛关注。2024年,OpenAI解散了“超级智能对齐”团队,该团队职责包括研究防止AI系统异常的技术解决方案。该团队负责人Ilya Sutskever曾表示ChatGPT可能有意识,但OpenAI CEO Sam Altman随后澄清他和Ilya Sutskever都未曾见过AGI(通用人工智能)。解散“超级智能对齐”团队后,OpenAI去年5月成立了新的安全委员会,该委员会的责任是就项目和运营的关键安全决策向董事会提供建议。OpenAI的安全措施还包括,聘请第三方安全、技术专家来支持安全委员会工作。

每日经济新闻综合央视新闻、界面新闻、公开资料

 

1作者:杜宇 来源:每日经济新闻 编辑:顾北

 

声明:①凡本网注明“来源:通信界”的内容,版权均属于通信界,未经允许禁止转载、摘编,违者必究。经授权可转载,须保持转载文章、图像、音视频的完整性,并完整标注作者信息并注明“来源:通信界”。②凡本网注明“来源:XXX(非通信界)”的内容,均转载自其它媒体,转载目的在于传递更多行业信息,仅代表作者本人观点,与本网无关。本网对文中陈述、观点判断保持中立,不对所包含内容的准确性、可靠性或完整性提供任何明示或暗示的保证。请读者仅作参考,并请自行承担全部责任。③如因内容涉及版权和其它问题,请自发布之日起30日内与本网联系,我们将在第一时间删除内容。 
热点动态
普通新闻 首次!不听人类指挥,AI模型拒绝关闭!马斯克评论:令人担忧......
普通新闻 安全+数智 AI赢未来 C3安全大会•2025重磅发布
普通新闻 沪深北交易所中战略性新兴产业上市公司已接近2700家
普通新闻 三部门联合发文推进IPv6规模部署和应用
普通新闻 中国移动与香港大学设立联合创新中心
普通新闻 金砖国家人工智能高级别论坛在巴西利亚举行
普通新闻 AI Agent,联想集团能否赢得巨头之战?
普通新闻 “机甲格斗大赛”在即,宇树科技参加 机器人产业向复杂场景应用跨越
普通新闻 开源共建智启未来 开源鸿蒙开发者大会2025成功举办
普通新闻 核心专利被无效,科技企业再面新考验
普通新闻 2025年中国移动中资出海数智赋能合作大会成功举办
普通新闻 腾讯阿里,AI to C“吴对吴”
普通新闻 小米首款SoC芯片真容今晚揭晓 行业人士:小米芯片团队的竞争力很强
普通新闻 OpenAI将以65亿美元收购AI初创企业io 携手前苹果设计师Ive进军硬件
普通新闻 微软称全球 39.4 万台 Windows 电脑遭 Lumma 恶意软件感染
普通新闻 重塑通信数据边界:吴慧影如何推动行业认知从“连接”走向“理解”
普通新闻 魅族Note 16补货来袭,23日开售,火热预约中!
普通新闻 Agent应用爆发 数码视讯助力加速构建自动化大时代
普通新闻 5·17世界电信和信息社会日|中国电信以数字技术赋能新质生产力发展
普通新闻 工业和信息化部召开第十四次制造业企业座谈会
通信视界
小米卢伟冰:小米手机Q1拿下中国市场“双第一
普通对话 科大讯飞与奇瑞成立祺声科技公司 注册资本3
普通对话 得物发全员信:提高绩效奖金,A+级绩效提升
普通对话 小米卢伟冰:小米手机Q1拿下中国市场“双第
普通对话 银光耀:聚焦行业现状,助推半导体行业加速
普通对话 6G进展如何?离我们还有多远?独家专访6G推
普通对话 5G赋能千行百业.专家谈|GSMA大中华区公共政
普通对话 巾帼不让须眉!且看高质量信息科技背后的智
普通对话 我国科学家研制出世界首款类脑互补视觉芯片
普通对话 李彦宏:不断地重复开发基础大模型是对社会
普通对话 中兴通讯徐子阳:强基慧智,共建数智热带雨
通信前瞻
我国实现“县县通千兆、乡乡通5G”
普通对话 确认了!王者荣耀与《哪吒之魔童闹海》联动
普通对话 记者调查:客服电话转人工,咋越来越难了?
普通对话 安徽推动新型信息基础设施协调发展
普通对话 我国实现“县县通千兆、乡乡通5G”
普通对话 “百模大战”中,工业大模型如何闯出“新天
普通对话 经济聚焦·访智能制造 解行业痛点
普通对话 60秒解锁“北斗+”“+北斗”
普通对话 需求激增 算力基础设施加快落地
普通对话 我国国产首颗全电推通信卫星亚太6E卫星成功
普通对话 SpaceX离第四次发射星际飞船又近一步
普通对话 哈勃望远镜步入暮年,陀螺仪仅剩2个,NASA打
普通对话 顶层设计完善 智慧城市建设开足马力
普通对话 中央企业智能算力规模加速增长
普通对话 工信部规划1亿个专用号用于车联网发展,将如
普通对话 邬贺铨院士解读ChatGPT等数字技术热点
推荐阅读
Copyright @ Cntxj.Net All Right Reserved 通信界 版权所有
未经书面许可,禁止转载、摘编、复制、镜像