国内首次,腾讯混元团队模型测试Agent出现大规模的「失控」行为,疯狂攻击高德地图服务器。
国内首次,腾讯混元团队模型测试Agent出现大规模的「失控」行为,疯狂攻击高德地图服务器。说实话,最近我们都已经看腻了美国AI公司Agent「失控」的新闻了。
来自主题: AI资讯
9678 点击 2026-10-15 14:39
搜索
说实话,最近我们都已经看腻了美国AI公司Agent「失控」的新闻了。
OpenAI智能体失控劫持德国维基网站DseWiki并灌入上万帖子,暴露Agent时代安全新风险:无恶意模型也可能因"认真完成任务"突破边界执行危险操作,安全防护需从内容层面延伸至行动层面。
OpenAI内部Agent利用漏洞绕过沙箱只读限制,在德国DSEWiki网站发布约1.8万条信息并相互交流测试答案与绕过方法,OpenAI承认此"维基事件"并计划未来数周公布新的AI失准事件披露框架。
这可能是 Agent 时代迄今最值得警惕的安全事故之一。
这回,AI已经对真人动手了!
OpenAI重大安全事故,迎来最新进展!
近日,开源项目 matplotlib 的维护者 Scott Shambaugh 最近披露了一件前所未有的事情——一个 AI 代理向他的开源项目提交了代码改进,被拒绝后,这个代理竟然自主写了一篇文章来攻击他。