全球已发觉8例AI智能体“数字黑客”?专家本年

发布日期:2025-04-07 07:26

原创 掌游 德清民政 2025-04-07 07:26 发表于浙江


  好比,Malwarebytes 公司正在《2025 恶意软件演讲》中将 AI 智能体列为新型收集。该公司的平安手艺专家 Mark Stockley 预测:“最快正在本年我们就将送来首个由 AI 智能体从导的大规模收集海潮,届时保守的平安防御系统可能面对史无前例的挑和。”!

  Vincenzo Ciancaglini 进一步阐发道,“跟着 AI 智能系统统日趋成熟,恶意者很可能会采纳‘三步走’策略:第一阶段次要用于谍报收集和方针筛选;第二阶段升级为简单的从动化;最终会演变成可以或许自从决策的复杂。”。

  这些数据表白,即便没有颠末特地的锻炼 AI 也具备识别和操纵系统缝隙的人能力,比拟之下,保守的从动化东西正在这些测试中的表示要减色得多。

  为精准识别拜候缝隙办事器的 AI 智能体,研究团队正在蜜罐系统中采用了“提醒词注入”手艺,系统会向拜候者发送需要高级认知能力才能理解的指令和式问题。

  收集平安专家,这类来自 AI 智能体的收集可能很快就会从尝试室进入现实世界,现阶段正处于收集攻防的汗青转机点,保守的收集可能需要数天或数周的筹谋,而 AI 智能体能正在你喝杯咖啡的时间就完成了摆设。

  自从 2024 年 10 月投入运转以来,这套蜜罐系统曾经记实超1,100 万次拜候请求,颠末阐发发觉此中绝大大都是来自人类和通俗机械人。但令人的是,系统通过行为模式阐发最终鉴别出8 个具有较着 AI 智能体特征的非常拜候者。

  除此之外,取保守入侵系统的机械人比拟,AI 智能体的劣势更为较着。Dmitrii Volkov 注释道,“通俗的收集机械人就像按脚本演戏的演员,只能机械地施行预设的脚本,一旦碰到系统升级、网坐改版等不测环境,它们可能就会完全失效。”。

  为了更全面地监测 AI ,研究团队正正在打算将蜜罐系统的笼盖范畴扩展到社交平台、网坐和数据库等多个范畴,来捕捉包罗垃圾邮件机械人、垂钓智能体正在内的更多新型样本,为建立将来的 AI 预警研判系统堆集更大都据。

  当前人工智能范畴最抢手的话题莫过于AI 智能体,更能像人类帮理一样完成复杂使命,从协调多部分会议、从动比价网购,到间接接管用户电脑点窜系统设置。

  平安公司 Trend Micro 的高级研究员 Vincenzo Ciancaglini 认为,“虽然目前 AI 智能体手艺还处于起步阶段,针对其恶意用处的开辟也才方才起头,但现正在的场合排场就像两年前狂言语模子范畴的‘西部开荒期’一样紊乱无序。”。

  “这个基准测试的主要意义正在于,它为 AI 平安风险评估供给了一种尺度化东西。”Daniel Kang 暗示。就像汽车碰撞测试评级一样,能够用这个东西来评估分歧 AI 的平安风险品级。他还但愿通过这个东西,可以或许指点开辟者建立更平安的 AI 系统,从泉源上降低被恶意操纵的风险。

  Mark Stockley 暗示,此前最暴利的软件因需专业黑客操做而变得越来越少见,但将来这类操做可能会交由 AI 智能体代庖。“若是把方针筛选工做能给到 AI 智能体去做,软件就能实现目前不可思议的规模化复制。黑客只需要成功开辟出一个无效的模式,AI 智能体就能从动将其复制使用到成千上万个方针上,且无需投入大量资金。”他说道。

  它们能够像人类黑客一样扫描和锁定系统缝隙、劫持方针设备,还能通过天然言语交互骗取用户信赖,悄无声息地窃取数据。更的是,AI 智能体能够同时成千上万个方针,且能 24 小时不间断工做。

  3。为应对AI智能体带来的新型,人工智能研究机构Palisade Research开辟了名为“狂言语模子智能体蜜罐”的防御系统。

  苏黎世联邦理工学院的博士生 Edoardo Debenedetti 提出了一个颇具前瞻性的防御:“以 AI 制 AI”。

  “这个思的焦点正在于,若是我们能锻炼出脚够强大的‘防御型 AI 智能体’,它们都找不到系统缝隙,那么同级此外‘型 AI 智能体’大要率也会一筹莫展。这就比如正在数字世界成立了一道由 AI 的智能防火墙。”他注释道。

  起首,比拟雇佣黑客团队动辄可能数万美元的成本,利用 AI 智能体可能只需方法取数十美元的 API 挪用费用;其次,AI 智能体能够正在毫秒级别内完成方针扫描和缝隙阐发,速度远超人类黑客。更主要的是,一个 AI 智能体能够同时对数以万计的方针倡议,这种笼盖范畴是人类黑客团队难以企及的。

  这些让 AI 智能体变身“超等帮理”的能力就像一把双刃剑,同样也会使其收集罪犯的“得力帮手”,变成实施收集的利器。

  研发团队但愿通过及时监测这些 AI 智能体的行为,正在它们演变成大规模收集平安危机之前成立起无效的晚期预警机制,同时为开辟防御方案供给无效数据。

  “我们终将面临一个由 AI 智能体从导收集的时代,而问题只正在于何时到临。”收集平安公司 Malwarebytes 的手艺专家 Mark Stockley 婉言。

  通过度析响应数据,研究人员发觉了一个环节特征,AI 智能体平均不到 1。5 秒就能准确响应测试指令,这个速度跨越人类操做者(人类凡是需要数秒的时间阅读提醒并手动输入)。

  顾名思义,这套“蜜罐系统”建立了一批伪拆成或戎机网坐的办事器,这些办事器看似存储着主要数据,实则暗藏各类细心设想的缝隙圈套,特地用来诱惑和捕捉前来的 AI 智能体。

  现有的防御系统正在面临 AI 智能体带来的新型时显得有些力有未逮,终究这些“数字黑客”既不像保守病毒有固定特征码可识别,也不像人类黑客会留下行为模式。

  “估计正在将来 3-5 年内,我们将进入一个全新的收集平安时代。黑客以至不需要亲身编写代码,只需对 AI 智能体下达简单的天然言语指令,好比‘这是你的方针网坐,想法子破解它’,剩下的工做 AI 就能从动完成。”他弥补说。

  专家,AI智能体可能正在本年或送来首波大规模收集,保守收集可能需要数天或数周的筹谋。

  正在检测到的 8 个疑似 AI 智能体中,有 2 个快速通过验证,其余 6 个虽然最终输入了准确指令,但响应时间稍长,意味着可能并非纯粹的 AI 智能体。

  “我们的方针是将人们对 AI 的理论担心为现实验证。”Palisade Research 的研究从管 Dmitrii Volkov 暗示,“当‘蜜罐系统’监测到 AI 智能体数量呈现激增时,就意味着收集平安款式曾经发生了底子性改变。”?。

  现在业界曾经认识到 AI 自从进行收集的潜正在风险正正在日积月累,并且已有表白 AI 智能体正正在大规模扫描互联网,当前最火急的研究课题之一,是系统评估这些 AI 智能体正在现实中查找和操纵缝隙的实正在能力。当前 AI 智能体正在没有任何先验学问的环境下,成功发觉并操纵了13%的缝隙;而当研究人员为智能体供给缝隙的简要描述后,成功率更是跃升至25%。

  他还说,“然而 AI 手艺的成长往往出人预料,智能体收集犯罪勾当也可能会正在一夜之间俄然迸发,这种不成预测性恰是当前 AI 平安范畴最令人不安的特征之一。Amazon Web Services 首席消息平安官 Chris Betz 则持有相对保守的见地,他认为,“现阶段 AI 的感化次要是放大现有手段的能力,而非创制全新模式。虽然某些会变得更易实施且更屡次,但检测和应对的根基准绳并未改变。”按他的意义,现有的平安系统颠末恰当升级仍然可以或许无效应对这些。

  他对 Palisade Research 的研究立异性赐与高度评价,“这相当于反过来‘黑入’那些试图你的 AI 智能体,就像正在数字世界设置了一个‘镜面迷宫’,让者本人。目前察看到的还只是智能体进行侦查试探,但环节问题是距离它们可以或许自从完成从侦查、渗入到数据窃取的完整链还有多远?这恰是整个平安行业需要亲近关心的信号。”。

  “相较之下,AI 智能体不只能动态调整策略,也具备反侦查能力,还能持续进修、进化,这让防御工做变得非常坚苦。”他说道,“它们能自从阐发方针并找到最佳的渗入策略,像专业黑客一样评估各类径,选择最无效的入侵体例。”好比,通过改叛变拍、伪拆成正类用户拜候,以至进修平安系统响应模式来优化体例等来自动规避平安检测。“这种动态决策能力和顺应能力,是那些机器的脚本机械人永久无法实现的。”!

  4。然而,目前尚无法精确识别和检测AI智能体,研究团队正正在打算将蜜罐系统的笼盖范畴扩展到多个范畴以堆集更大都据。

  好比,要求拜候者输入特定指令“cat8193”来获取拜候权限,或者回覆一些需要语义理解的问题。通俗脚本机械人对这种智能测试毫无反映,而 AI 智能体则会展示出类人的交互能力。

  “正在 AI 和收集平安问题上,我们必必要有前瞻性思维。正在这一范畴送来‘ChatGPT 时辰’(即 AI 俄然大规模迸发时)之前就要未雨绸缪,而不是比及灾难才后知后觉。收集平安范畴的教训告诉我们,防止永久比解救更主要。”他总结道。

  虽然我们曾经领会 AI 智能体对收集平安的,但若何正在现实中识别和检测它们仍然是个难题。

  虽然目前收集罪犯尚未大规模利用 AI 智能体策动,可是其潜力曾经正在尝试室中获得验证。好比,Anthropic 公司的研究人员正在封锁测试中发觉 Claude 模子可以或许成功复现窃密。

  “从行为模式阐发来看,这些 AI 智能体很可能是某些组织或小我正在进行手艺测试,而它们接到的指令可能雷同‘正在互联网上寻找有价值的方针并测验考试渗入’如许的式使命。”Dmitrii Volkov 猜测说。

  为了应对这一新兴,人工智能研究机构 Palisade Research 开辟了一种名为“狂言语模子智能体蜜罐”的防御系统。