智客 ZICQ
EN 登录 / 注册
智客前沿 智能体 #智能体安全 #黑盒攻击 #技能窃取 #ArXiv #AI安全

ArXiv发布Daydreaming攻击:黑盒任务交互窃取隐藏智能体技能

Mr.Xu 的头像

文 / Mr.Xu 智客前沿编译 · 审校

发布时间: · 1 次阅读

中文阅读 (Chinese) English Version
共读互动 选中正文任意句子即可高亮划线、写下你的技术批注,或一键生成金句引用卡。 直达讨论区 ↓

摘要:ArXiv发布了一项名为Daydreaming的新研究,提出了一种通过黑盒任务交互窃取隐藏智能体技能的攻击方法。该方法无需直接请求技能或重建其文本,而是通过自适应生成特定任务,利用结果区分可能的隐藏行为,从而实现对多文件技能的窃取。实验表明,Daydreaming在7种技能和4种受害者模型上恢复了原始技能能力的86.8%,显著优于现有方法SigLeak。这项研究揭示了现有防御机制在防止技能泄露方面的局限性,强调了通过正常任务交互实现功能重建的潜在风险。


研究背景与动机

智能体技能通常由指令、参考数据和可执行助手组成,允许通用智能体执行特定任务。托管服务提供商可以隐藏这些文件,仅出售任务结果访问权限,使技能本身成为有价值的目标。现有的披露防御机制可以阻止直接请求技能或复制其文本的请求,但无法阻止客户提交服务旨在完成的任务。

Daydreaming攻击方法

Daydreaming是一种仅通过执行的攻击方法,通过黑盒任务交互窃取多文件技能。该方法不会要求受害者透露技能或对重建进行评分,而是自适应地创建特定任务,通过结果区分可能的隐藏行为。具体步骤包括:

  • 行为测试:测试单个行为以识别潜在隐藏模式。
  • 设计选择:使用攻击者控制的影子智能体选择最佳设计。
  • 文件完成:利用存储的受害者结果和本地执行检查完成每个文件。

实验结果

研究将访问威胁级别分为差异性、跟踪性和输出性三个嵌套级别,并重点关注输出性级别,即攻击者仅能看到最终响应和返回的文件。在7种技能和4种受害者模型上,Daydreaming在输出性级别恢复了原始技能能力的86.8%,比SigLeak高出近4倍。即使在启用披露防御机制的情况下,Daydreaming平均每种技能仅需32次受害者调用即可生成可安装的技能。

结论与影响

这项研究结果表明,仅隐藏技能文件并过滤直接披露请求,并不能防止通过正常任务交互实现的功能重建。这对智能体技能的安全性和防御机制提出了新的挑战,强调了需要更全面的保护策略。

对开发者的建议

  1. 增强防御机制:开发者在设计智能体技能时,应考虑更复杂的防御策略,例如行为分析、异常检测和动态访问控制。
  2. 多层次安全措施:结合多种安全措施,如加密、访问控制和审计日志,以防止技能泄露。
  3. 持续监控与更新:定期监控智能体行为,及时更新防御机制以应对新出现的攻击方法。

消息来源:ArXiv cs.AI (2026-08-27)

—— 完 ——

主题标签: #智能体安全 #黑盒攻击 #技能窃取 #ArXiv #AI安全

编辑部与事实核查说明:本篇专刊由智客前沿资讯管线根据官方技术公告、学术论文及开源工程文档整理编译,经算法实体核验与人工编辑审校后发布。若发现技术事实纰漏,欢迎依据勘误方针或一键向编辑部发送勘误反馈。

读完这篇,你的第一判断是?
🚀 去【作品】晒出你的相关实践

社区整体评论区

正在加载实时智能评论与划词标注…