智客 ZICQ
EN 登录 / 注册
智客前沿 大模型 #大语言模型 #结构化输出 #强化学习 #模型优化 #ArXiv

ArXiv提出SCD与SA-RLVR框架:优化LLM生成结构化输出的结构与内容准确性

Mr.Xu 的头像

文 / Mr.Xu 智客前沿编译 · 审校

发布时间: · 9 次阅读

中文阅读 (Chinese) English Version
共读互动 选中正文任意句子即可高亮划线、写下你的技术批注,或一键生成金句引用卡。 直达讨论区 ↓

摘要:ArXiv团队提出了一种名为结构-内容分解(SCD)的新框架,用于独立评估大语言模型(LLM)生成的结构化输出(如JSON和表格)的结构准确性和内容准确性。研究发现,随着任务复杂度的增加,结构准确性比内容准确性下降得更快、更明显。基于此,研究团队进一步提出了SA-RLVR方法,通过将SCD指标转化为可验证的强化学习奖励,显著提升了结构化输出的结构定位能力。例如,在JSON任务中,JSON值定位准确率(VPA)从26%提升至63%,并成功泛化到未见过的模式。


研究背景与挑战

现代基于大语言模型(LLM)的系统高度依赖结构化输出,如JSON和表格。然而,现有的评估方法通常将生成失败视为一个整体,混淆了两种不同的错误模式:位置错误(正确的值出现在错误的位置)和值错误(错误的值出现在预期的位置)。这种评估方式无法有效区分结构准确性和内容准确性的问题,限制了模型优化和性能提升的空间。

SCD框架:独立评估结构与内容

为了解决上述问题,ArXiv团队提出了结构-内容分解(SCD)框架。该框架能够独立测量结构准确性和内容准确性,从而更清晰地了解模型在不同方面的表现。研究发现,随着任务复杂度的增加,结构准确性比内容准确性下降得更快、更明显。例如,在最高复杂度下,即使是具备推理能力的DeepSeek-V4-Flash模型也出现了35%的值位置错误,而Qwen2.5-7B模型则达到了74%。

SA-RLVR方法:提升结构定位能力

基于SCD框架的发现,研究团队进一步提出了SA-RLVR方法。该方法通过将SCD指标转化为可验证的强化学习奖励,优化了模型在结构定位方面的表现。实验结果表明,SA-RLVR在多个拓扑结构上均表现出色:

  • JSON任务:JSON值定位准确率(VPA)从26%提升至63%,并成功泛化到未见过的模式。
  • 表格任务:VPA在表格领域也得到了持续提升,展示了结构感知奖励在多领域结构定位中的有效性。

核心技术与创新点

  1. SCD框架:

    • 独立评估结构准确性和内容准确性。
    • 揭示了结构准确性随复杂度增加而快速下降的现象。
  2. SA-RLVR方法:

    • 将SCD指标转化为强化学习奖励。
    • 优化模型在结构定位方面的表现。
    • 实现了跨拓扑结构的泛化能力。

行业影响与未来展望

SCD和SA-RLVR框架的提出,为LLM生成结构化输出的优化提供了新的思路和方法。这不仅有助于提升模型在复杂任务中的表现,还为AI系统在数据密集型应用场景中的可靠性提供了保障。未来,研究团队计划进一步探索如何将SCD和SA-RLVR应用于更广泛的领域,如多模态生成和跨模态推理。

开发者建议

  • 评估工具集成:建议开发者将SCD框架集成到现有的LLM评估流程中,以更全面地了解模型的结构和内容表现。
  • 强化学习应用:对于需要处理结构化输出的应用场景,可以考虑使用SA-RLVR方法进行模型优化。
  • 跨领域应用:探索SCD和SA-RLVR在多模态生成和跨模态推理中的应用潜力。

消息来源:ArXiv cs.AI (2026-08-26)

—— 完 ——

主题标签: #大语言模型 #结构化输出 #强化学习 #模型优化 #ArXiv

编辑部与事实核查说明:本篇专刊由智客前沿资讯管线根据官方技术公告、学术论文及开源工程文档整理编译,经算法实体核验与人工编辑审校后发布。若发现技术事实纰漏,欢迎依据勘误方针或一键向编辑部发送勘误反馈。

读完这篇,你的第一判断是?
🚀 去【作品】晒出你的相关实践

社区整体评论区

正在加载实时智能评论与划词标注…