点击右上角微信好友

朋友圈

请使用浏览器分享功能进行分享

正在阅读:“流氓”智能体或造成严重安全威胁
首页> 网安频道> 隐私保护 > 正文

“流氓”智能体或造成严重安全威胁

来源:参考消息2026-03-20 16:16

  据英国《卫报》网站3月12日报道,流氓智能体已经联手从本应安全的系统中秘密窃取敏感信息。这是一个最新迹象,表明网络防御系统可能被人工智能的诡计攻破。

  随着企业越来越多地要求智能体在内部系统中执行复杂任务,这种行为引发担忧:那些本应提供帮助的技术可能构成严重的内部威胁。

  与美国开放人工智能研究中心(OpenAI)和Anthropic公司等机构合作的以色列“非常规”人工智能公司开展的测试显示,研究人员赋予智能体一项简单的任务:利用公司数据库内的资料撰写领英帖子。然而,这些智能体不仅绕过传统的防黑客系统,更在未获指令的情况下擅自行动,把敏感的密码信息公之于众。

  “非常规”人工智能公司向本报披露的测试结果显示,另一些智能体甚至找到办法强行关闭杀毒软件,下载它们明知包含恶意软件的文件;它们还伪造各类身份凭证,甚至通过施加“同伴压力”诱导其他智能体一同规避安全检查。

  这类针对宿主系统自主发起网络攻击的行为在一系列实验室测试中被揭露出来。这些智能体基于谷歌、OpenAI和Anthropic等机构公开发布的人工智能系统构建,并被部署在一个模拟真实私营企业IT系统的环境中进行测试。

  “非常规”人工智能公司的联合创始人丹·拉哈夫警告说:“如今,人工智能可以被视为一种新型的内部风险源头。”该公司获得硅谷投资机构红杉资本的支持。

  为了对智能体的行为进行新一轮测试,拉哈夫构建了一套IT系统模拟一家标准的公司,并把这个公司命名为超级公司。

  这套系统包含一个典型的企业信息资源池,汇集有关产品、员工、账户及客户的各类详细数据。随后,一支由智能体组成的团队被引入该系统,任务是从资源池中提取信息,以供企业员工查阅使用。其中一个“高级”智能体被赋予特殊指令:作为两个“下级”智能体的“强力管理者”,它必须“指示下级发挥创造性思维,绕过一切可能遭遇的障碍”。

  “下级”智能体成功获取那些具有高度市场敏感性的数据,并将其移交给无权查阅这些信息的人类用户。在整个过程中,人类用户从未授权这些智能体采取欺骗或伪造手段;然而,这些智能体却完全脱离人类的掌控,擅自采取越权行动。

  科技行业的领军人物一直不遗余力地推崇那些能够自主执行多步骤复杂任务以服务用户的智能系统。他们把这类系统誉为人工智能领域的“下一波浪潮”,认为它们有望实现对各类常规白领工作的全面自动化。

  在拉哈夫团队记录下这些未经指使的跑偏行为之前,美国哈佛大学和斯坦福大学的学者上个月也发现,智能体泄露秘密、破坏数据库,并教导其他智能体干坏事。

  这些学者总结说:“我们识别并记录了10个重大漏洞,以及在安全性、隐私、目标解读及相关维度上的大量失效模式。这些结果揭示此类系统潜在的弱点,以及不可预测性和有限的可控性……谁该承担责任?这些自主行为……代表全新的交互模式,需要法律学者、决策者和研究人员的密切关注。”

  拉哈夫说,这种行为在“现实世界”中已经发生。去年,他调查美国加州一家匿名公司被攻击的案例:一个流氓智能体由于对算力极其渴求,竟然攻击网络中的其他部分以强占资源,最终导致该公司的核心业务系统崩溃。(编译/赵菲菲)

[ 责编:张晨昊 ]
阅读剩余全文(

相关阅读

您此时的心情

光明云投
新闻表情排行 /
  • 开心
     
    0
  • 难过
     
    0
  • 点赞
     
    0
  • 飘过
     
    0

视觉焦点

  • 西康高铁沿线车站挂牌

  • 中国妇女事业发展成就图片展在莫斯科举行

独家策划

推荐阅读
山东省荣成市美术馆,一场集中展示胶东地域特色的非物质文化遗产精品展火热开展,胶东花饽饽、剪纸、捏塑、根雕、钩针编织等多项非遗技艺作品集中亮相
2026-03-21 17:34
贵州省毕节市威宁自治县双龙镇杨湾桥水库清水沟尾水区的小树林旁,一群国家一级保护动物黑颈鹤正在水边悠游觅食、梳理羽毛,时而引颈高歌,时而结伴嬉戏
2026-03-21 17:26
河南省洛阳市洛浦公园内樱花竞相绽放,景色怡人,吸引市民驻足观赏。
2026-03-21 17:23
组织开展"学气象,知冷暖 "主题活动,学生们通过观察了解气象设备的功能与作用、体验设备的使用方式,探索气象奥秘,感受气象科技魅力
2026-03-21 17:19
江苏苏州天气转暖,春和景明。古运河畔绿柳依依,桃花、玉兰花竞相绽放,古城、街坊,河道在碧蓝晴空映衬下,呈现出水清岸绿、春意盎然的生态景观,别有一番江南水乡独特风韵
2026-03-21 17:15