智客 ZICQ
EN 登录 / 注册
智客前沿 前沿论文 #LLM智能体 #技能复用 #溯源审计 #多模态 #可解释性

SKILLTRACE:多轨迹溯源审计框架,精准检测LLM智能体技能复用

Mr.Xu 的头像

文 / Mr.Xu 智客前沿编译 · 审校

发布时间: · 11 次阅读

中文阅读 (Chinese) English Version
共读互动 选中正文任意句子即可高亮划线、写下你的技术批注,或一键生成金句引用卡。 直达讨论区 ↓

摘要:arXiv最新研究提出SKILLTRACE,一个针对LLM智能体技能复用的多轨迹溯源审计框架。该框架提取表达、实现和操作三条溯源轨迹,其中操作轨迹以技能操作图(SOG)表示,捕捉激活、流程和资源流结构。在SKILLTRACE-BENCH基准上,AUROC达0.938,F1达0.898,并在36,446个技能的真实审计中展现出优于仓库级基线的可操作审查队列。该研究为智能体生态中的技能复用审计提供了新范式。


概述

随着LLM智能体生态的快速发展,可复用技能(skills)已成为市场化的构件。这些技能是混合模态的包,包含元数据、自然语言指令、代码、工具、参考和操作工作流。然而,审计这些技能的复用不再等同于传统的代码克隆检测。现有检测器主要针对单模态源代码或整体包相似性,但技能复用证据分散在文本、实现片段和操作结构中,导致仅保留技能某一部分的复用行为可能被遗漏。

SKILLTRACE框架

SKILLTRACE是一个多轨迹溯源审计框架,专门用于LLM智能体技能复用检测。它提取三条溯源轨迹:

  • 表达轨迹(Expression):捕捉技能中的自然语言指令和描述。
  • 实现轨迹(Implementation):捕捉代码和工具实现片段。
  • 操作轨迹(Operational):以技能操作图(SOG)表示,捕捉激活、流程和资源流结构。

在审计时,SKILLTRACE对缓存的轨迹进行确定性比较,并针对同功能严格负样本校准每条轨迹,最终报告哪条轨迹支持复用决策。LLM仅在摄取时辅助操作轨迹提取一次,审计过程完全确定性。

实验结果

在SKILLTRACE-BENCH基准上,包含820个转换后的复用正样本(基于100个市场锚点)和751个负对照,SKILLTRACE取得了AUROC 0.938和F1 0.898的优异成绩。此外,对36,446个技能的真实审计表明,基于轨迹归因的证据能够产生可操作的复用审查队列,超越了仓库级基线。

技术亮点

  • 多模态溯源:同时考虑文本、代码和操作结构,避免单一模态检测的盲区。
  • 确定性审计:审计阶段无需LLM,保证结果可复现和高效。
  • 可解释性:明确报告哪条轨迹支持复用决策,便于人工审查。

行业影响与开发者建议

该研究为智能体技能市场的治理提供了技术基础。对于开发者而言,SKILLTRACE可用于:

  • 检测技能复用中的潜在侵权或合规问题。
  • 优化技能库管理,识别冗余或重复技能。
  • 增强智能体生态的透明度和可信度。

未来,该框架有望与技能市场平台集成,实现自动化的技能审计和质量管理。

出处

本文基于arXiv论文“SkillTrace: Multi-Trace Provenance Auditing for LLM-Agent Skill Reuse”(arXiv:2608.05204)。


消息来源:ArXiv AI (cs.AI) (2026-08-07)

—— 完 ——

主题标签: #LLM智能体 #技能复用 #溯源审计 #多模态 #可解释性

编辑部与事实核查说明:本篇专刊由智客前沿资讯管线根据官方技术公告、学术论文及开源工程文档整理编译,经算法实体核验与人工编辑审校后发布。若发现技术事实纰漏,欢迎依据勘误方针或一键向编辑部发送勘误反馈。

读完这篇,你的第一判断是?
🚀 去【作品】晒出你的相关实践

社区整体评论区

正在加载实时智能评论与划词标注…