智客 ZICQ
EN 登录 / 注册
智客前沿 智能体 #HARNESSEVO #LLM #智能体 #优化策略 #反思/控制

arXiv提出HARNESSEVO框架:优化自进化LLM智能体中的局部优化价值

Mr.Xu 的头像

文 / Mr.Xu 智客前沿编译 · 审校

发布时间: · 2 次阅读

中文阅读 (Chinese) English Version
共读互动 选中正文任意句子即可高亮划线、写下你的技术批注,或一键生成金句引用卡。 直达讨论区 ↓

摘要:arXiv发布了一项关于自进化大语言模型(LLM)智能体的研究,提出了一种名为HARNESSEVO的新框架。该框架将智能体的文本结构(harness)分解为四个可独立进化的槽位:角色、任务策略、工具/格式规则和反思/控制。通过对比实验,研究发现优化价值主要集中在反思/控制槽位,而其他槽位对整体性能的贡献几乎为零。此外,研究指出,均匀分配优化预算会显著降低性能,而集中资源于高价值槽位则能大幅提升智能体表现。这项研究为未来智能体进化策略的设计提供了重要参考。


研究背景与动机

近年来,随着大语言模型(LLM)的快速发展,如何通过优化其文本结构(harness)来提升智能体性能成为研究热点。现有的反思性提示进化方法通常将harness视为一个整体字符串进行优化,而忽略了不同组件对性能的差异化贡献。

HARNESSEVO框架

HARNESSEVO框架通过将harness分解为四个可独立进化的槽位:

  • 角色(Role):定义智能体的身份和目标。
  • 任务策略(Task-Strategy):规划智能体完成任务的具体步骤。
  • 工具/格式规则(Tool/Format-Rules):指定智能体可使用的工具和输出格式。
  • 反思/控制(Reflection/Control):控制智能体的反思过程和决策逻辑。

实验与结果

研究在ALFWorld环境中进行了实验,使用冻结的7B参数模型作为骨干网络。实验结果表明:

  • 整体性能:HARNESSEVO在整体二元成功率上与标准harness和扁平字符串进化方法相比无显著提升(0.657 vs 0.642 vs 0.642)。
  • 槽位级分析:反思/控制槽位的优化价值最为显著,其单独增益为+0.119,而其他槽位几乎没有贡献。
  • 预算分配的影响:均匀分配预算会降低性能,而集中预算于高价值槽位(如反思/控制)则能显著提升性能,达到0.761。

任务依赖性

在WebShop任务中,所有槽位均冻结为空,所有方法表现相同。这表明任务特性对优化价值分布有重要影响,而非预算不足导致的结果。

结论与启示

研究表明,harness的优化价值是局部化的,均匀分配预算可能产生负面影响。未来的智能体进化策略应首先进行信用分配,再进行结构化优化。

对开发者的建议

  1. 优先优化高价值槽位:在设计智能体进化策略时,应优先关注对性能提升最显著的槽位。
  2. 避免均匀预算分配:根据槽位的贡献度动态调整优化资源分配。
  3. 任务特性分析:不同任务对harness组件的依赖性不同,应根据具体任务调整优化策略。

消息来源:ArXiv NLP/LLM (cs.CL) (2026-09-04)

—— 完 ——

主题标签: #HARNESSEVO #LLM #智能体 #优化策略 #反思/控制

编辑部与事实核查说明:本篇专刊由智客前沿资讯管线根据官方技术公告、学术论文及开源工程文档整理编译,经算法实体核验与人工编辑审校后发布。若发现技术事实纰漏,欢迎依据勘误方针或一键向编辑部发送勘误反馈。

读完这篇,你的第一判断是?
🚀 去【作品】晒出你的相关实践

社区整体评论区

正在加载实时智能评论与划词标注…