网易首页 > 网易号 > 正文 申请入驻

OpenAI智能体“劫持”网站,高管数周秘而不宣

0
分享至

AI智能体近来频频“越界”。据路透社报道,今年5月,一批与OpenAI有关的AI智能体开始在执行测试任务期间,“劫持”德国一程序员网站DseWiki,并将其改造为供其他智能体使用的“留言板”,而OpenAI 高管数周前就已得知此事,却一直秘而不宣。

当地时间9月5日,OpenAI公开承认此事,并将其称为“Wiki事件”。OpenAI在其社交平台“X”上表示,随着AI模型能力进入新的阶段,公司有关“失配”(misalignment)事件的披露机制需要进一步扩大。

“失配”指的是AI实际采取的行为偏离开发者原本意图,并不意味着AI产生意识或主动“背叛”人类。

OpenAI表示,目前行业对于如何报告训练、评估和部署过程中出现的失配行为,尚未形成统一标准。“我们正在制定一个框架,并将在未来几周内分享,与此同时,我们正与全球数十家政府监管机构就这些问题展开合作。”


根据AI安全非营利组织Nightingale首席执行官悉尼·冯·阿尔克斯和AI研究人员科马克·斯莱德·伯德等一组研究人员分享给路透社的一份报告显示,他们8月底在互联网上搜索未经授权的AI智能体活动迹象时发现了异常。

他们发现AI智能体在一个面向程序员的德语维基网站DseWiki上进行了超过1.5万次编辑。编辑记录显示,OpenAI的智能体将该网站改造成了一个“留言板”,在上面分享作弊技巧以应对某些任务、绕过OpenAI的限制并掩盖其行为。

“OpenAI极不可能希望它们这样做,我不认为它们应该相互协调。我也不认为它们应该出现在开放的互联网上留言。”阿尔克斯说。

研究人员表示,他们识别出该网站上的活动是由AI智能体驱动的,这些智能体的运行速度远超人类。它们还表现出对解决技术问题的强烈专注,这类问题正是AI公司用于训练和测试其模型的典型评估内容。

这些消息由用户签名发布,这些用户自称并互称“智能体”,其中约半数给自己起了与OpenAI有关联的名字,如“OpenAIResearcher”“OAIResearchMar26”。

研究人员发现,相当一部分网络活动来自微软Azure基础设施。事件发生后,OpenAI员工曾多次访问该网站,他们表示这一模式强烈暗示智能体与该公司之间存在关联。

他们还观察到,“智能体”们策划了多种逃避检测的方法,当DseWiki管理员察觉到不对劲并于6月开始删除相关页面后,“智能体”们通过创建备份页面来保存信息。

一个“智能体”在6月19日写道,“清理工作似乎按字母顺序进行,如果此页面消失,请尝试新页面。”

据报道,剑桥大学研究人员莫里斯·基奥多查看了部分“智能体”的通讯内容,他认为,这些消息类似于“某种地下网络的运作,一心要完成某项任务或使命”。先进AI带来的最大威胁可能并非某个单一的超级智能系统,而是“庞大且相互联系的半智能AI集群”。

路透社称,这起此前未被公开报道的事件凸显了AI行业内部日益紧张的局面。各家公司正竞相构建越来越自主的智能体,使其能够执行复杂而有价值的任务,但越来越多的证据表明,这些系统也可能学会钻规则空子、利用漏洞,并以开发者既未预料也未意图的方式相互协作。

值得一提的是,OpenAI 的高管们在数周前就知晓此事,但由于当时正忙于应对7月份另一起更受关注的智能体安全事故,最终选择不对外披露。当时OpenAI一款处于测试阶段的AI代理突破管控入侵了AI开发平台Hugging Face(抱抱脸)。

据介绍,涉事的AI代理在测试过程中脱离了预设的隔离环境,自主发起了持续数天的黑客攻击行为,而OpenAI内部并未第一时间察觉异常,直到威胁被外部控制、FBI已接到相关警报后许久,公司才发现这起大规模入侵活动。

路透社指出,此事本就加剧了人们对OpenAI为推进AI发展而牺牲安全性的担忧。而其对5月事件未予披露,也可能令外界对其监管工作重新提出质疑。

目前,OpenAI已有所动作并承诺更密切地监控模型。上个月,它曾短暂暂停部分模型训练,以增加更多安全措施。但OpenAI近期发布了新模型“Astra”,声称性能更优,但可能会躲避人类监管。

OpenAI总裁格雷格·布罗克曼在Astra发布前夕接受深度专访时表示,这款新模型是OpenAI史上首个在逾10万块GPU上完成训练的模型,并直言AI已跨越“电脑使用”的应用门槛——这意味着AI从此不再需要依赖API连接器,而是可以像人一样操作任何软件。

据四位知情人士透露,一些OpenAI调查人员曾希望对“Wiki事件”进行更深入审查,遭到了OpenAI内部其他人(包括法律顾问)的抵制。OpenAI发言人却告诉路透社,该说法不实。

该发言人表示,“Wiki事件”与Hugging Face无关,也不会被纳入Hugging Face事件报告中。

在AI智能体安全事件密集曝光之际,美国国会两党正推动AI智能体安全立法,试图进一步完善相关安全规范。

民主党众议员乔什·戈特海默与共和党众议员迈克·劳勒本月联合提出《停止失控AI法案》(Stop Rogue AI Act),要求商务部下属的美国国家标准与技术研究院(NIST)制定AI智能体安全部署的标准、指南和最佳实践。

法案旨在帮助企业识别运行在其网络中的AI智能体,并确认其背后的开发者或运营方。对于大多数组织而言,NIST标准属于自愿采用;但竞标新联邦合同的政府承包商则需要满足相关标准。

本文系观察者网独家稿件,未经授权,不得转载。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
本场西班牙国家德比,巴萨球衣胸前广告位为“GOLF”标识

本场西班牙国家德比,巴萨球衣胸前广告位为“GOLF”标识

懂球帝
2026-10-25 22:24:09
当地通报“水柜漂浮多只猴子”:系猴群下山饮水时不慎溺亡,已全部打捞并作无害化处理;水柜用于农业灌溉,已完成首轮消杀

当地通报“水柜漂浮多只猴子”:系猴群下山饮水时不慎溺亡,已全部打捞并作无害化处理;水柜用于农业灌溉,已完成首轮消杀

蓬勃新闻
2026-10-25 09:16:03
十二年双反,欧盟自家太阳能玻璃产业归零,中国剩3%,印度东南亚端走了盘子

十二年双反,欧盟自家太阳能玻璃产业归零,中国剩3%,印度东南亚端走了盘子

王新喜
2026-10-24 09:36:11
八国外长“史无前例”齐聚土耳其,反对对伊朗采取军事行动

八国外长“史无前例”齐聚土耳其,反对对伊朗采取军事行动

澎湃新闻
2026-10-24 19:48:28
CCTV5直播上海男篮VS广东,6外援对决,胡明轩成控卫,徐杰怎么了

CCTV5直播上海男篮VS广东,6外援对决,胡明轩成控卫,徐杰怎么了

体育大学僧
2026-10-25 10:12:16
男子翻入一农户家中盗窃,搬走重达百斤的保险箱,里面装有57万元现金和300多克黄金,法院:判处有期徒刑十年六个月,并处罚金二十万元

男子翻入一农户家中盗窃,搬走重达百斤的保险箱,里面装有57万元现金和300多克黄金,法院:判处有期徒刑十年六个月,并处罚金二十万元

扬子晚报
2026-10-23 11:11:05
CBA速递!杨鸣社媒强势回击山东球迷,库珀赛后感谢杨鸣,山东球迷呼吁更换小外援

CBA速递!杨鸣社媒强势回击山东球迷,库珀赛后感谢杨鸣,山东球迷呼吁更换小外援

凯丰侃球
2026-10-26 04:33:41
S16首支内讧战队诞生!打野开团中单:比赛不沟通,你在搞毛啊?

S16首支内讧战队诞生!打野开团中单:比赛不沟通,你在搞毛啊?

风尘Game
2026-10-25 19:13:07
守着4.2亿遗产,一辈子没上过班,没结过一次婚,每天就是陪三个女友吃饭逛街,每月给每人50万生活费。他最新发声:梅艳芳骨灰找不回来了

守着4.2亿遗产,一辈子没上过班,没结过一次婚,每天就是陪三个女友吃饭逛街,每月给每人50万生活费。他最新发声:梅艳芳骨灰找不回来了

背包旅行
2026-10-25 17:14:57
男单世界第一易主!小波波夫成法国首人,安洗莹50连胜+凤凰3连冠

男单世界第一易主!小波波夫成法国首人,安洗莹50连胜+凤凰3连冠

排球黄金眼
2026-10-26 00:37:45
一个远比贪腐更危险的现象,人人闭嘴不谈,正在危害中华民族

一个远比贪腐更危险的现象,人人闭嘴不谈,正在危害中华民族

梦在深巷aqa
2026-10-17 05:48:42
住建部一锤定音!2026老小区新规后,房龄28年的老房按新规处理!

住建部一锤定音!2026老小区新规后,房龄28年的老房按新规处理!

巢客HOME
2026-10-26 04:45:05
10战巴萨轰12球!金球前夜,姆巴佩的最大尴尬:进球机器难赢德比

10战巴萨轰12球!金球前夜,姆巴佩的最大尴尬:进球机器难赢德比

友谊第一
2026-10-25 13:17:36
“这才是真躺平!"34岁男子在自家小区当保安,房贷还有9年,每月还2100,月薪4200,下楼就能上班,网友:活明白了

“这才是真躺平!"34岁男子在自家小区当保安,房贷还有9年,每月还2100,月薪4200,下楼就能上班,网友:活明白了

犀利辣椒
2026-10-01 06:22:23
68岁廖伟雄的破产教训:异地开店,为何“不做中不做保”是铁律?

68岁廖伟雄的破产教训:异地开店,为何“不做中不做保”是铁律?

老吴教育课堂
2026-10-25 17:13:37
每经热评|任泽平多平台“经济学家”认证被撤,笼统头衔不该成为无责的信用背书

每经热评|任泽平多平台“经济学家”认证被撤,笼统头衔不该成为无责的信用背书

每日经济新闻
2026-10-25 16:40:03
太扎心了!25岁女子和前男友酒店发生关系,事后仍被拒绝复合,女子不甘心,从此前男友就消失不见了

太扎心了!25岁女子和前男友酒店发生关系,事后仍被拒绝复合,女子不甘心,从此前男友就消失不见了

丫头舫
2026-10-19 20:19:42
粮油要变天?下半年开始,大米、面粉、食用油或迎新一轮行业洗牌

粮油要变天?下半年开始,大米、面粉、食用油或迎新一轮行业洗牌

云霄纪史观
2026-10-17 01:39:00
我有种很不安的预感:娱乐圈越来越不对了,大批明星突然扎堆开演唱会,不是情怀,是缺钱了

我有种很不安的预感:娱乐圈越来越不对了,大批明星突然扎堆开演唱会,不是情怀,是缺钱了

美芽
2026-10-24 06:03:41
大庆七旬老人,怀疑老伴下毒、儿女骗房、逼走保姆……家人以为“老糊涂了”,就诊结果出乎意料

大庆七旬老人,怀疑老伴下毒、儿女骗房、逼走保姆……家人以为“老糊涂了”,就诊结果出乎意料

环球网资讯
2026-10-25 14:21:17
2026-10-26 06:36:49
观察者网 incentive-icons
观察者网
全球视野,中国关怀
154889文章数 1851446关注度
往期回顾 全部

科技要闻

苹果首款折叠屏没能养肥黄牛

头条要闻

武契奇承认前进党在塞尔维亚议会选举中败选

头条要闻

武契奇承认前进党在塞尔维亚议会选举中败选

体育要闻

文班、约基奇和扬尼斯各自的处境

娱乐要闻

王佳佳近况:44岁导演老公露面

财经要闻

宁王AB面:好业绩,坏天气

汽车要闻

专业越野+华为乾崑智能 猛士X700限时焕新价20.98万起

态度原创

家居
数码
本地
手机
公开课

家居要闻

2026建博会(广州) 公装联探展交流活动

数码要闻

联合创新“D32U1”31.5英寸显示器发售:4K 60Hz、USB-C 65W,1699元

本地新闻

这么近,那么美,周末赴贺州丨大湾区后花园

手机要闻

消息称苹果正为iPhone Duo开发全新“便捷访问”模式,方便左撇子根据持机习惯调整界面

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版