智客 ZICQ
EN 登录 / 注册
智客前沿 智能体 #ArXiv #智能体 #LoRA #上下文压缩 #开源模型

ArXiv发布Paritok-4B:面向智能体编码任务的高效上下文压缩模型

Mr.Xu 的头像

文 / Mr.Xu 智客前沿编译 · 审校

发布时间: · 2 次阅读

中文阅读 (Chinese) English Version
共读互动 选中正文任意句子即可高亮划线、写下你的技术批注,或一键生成金句引用卡。 直达讨论区 ↓

摘要:ArXiv团队推出了一款名为Paritok-4B的4B参数LoRA模型,专为智能体编码任务设计。该模型通过提取式压缩技术,保留输入中的关键标识符、路径和数字,避免了传统通用压缩模型对代码的误处理。Paritok-4B在SWE-bench Lite基准测试中表现出色,将智能体上下文压缩至原始大小的25.7%,同时保持了86.5%的单次解决质量。此外,该模型无需每token费用,仅需一个24GB GPU即可运行,降低了推理成本。


核心突破

ArXiv团队推出了一款名为Paritok-4B的4B参数LoRA模型,旨在解决智能体编码任务中的上下文压缩问题。该模型具有以下核心特点:

  • 提取式压缩:Paritok-4B采用提取式方法而非生成式方法,保留输入中的关键标识符、路径和数字,避免了传统压缩模型对代码的误处理。
  • 意图条件化:该模型根据智能体的当前任务,在保留的片段内进行操作,优先选择与任务更相关的行,从而提高压缩效率。
  • 高效性能:在SWE-bench Lite基准测试中,Paritok-4B将智能体上下文压缩至原始大小的25.7%,是gpt-4.1-mini压缩器的两倍,是gpt-5的三倍,同时保持了86.5%的单次解决质量。

技术亮点

  1. 低资源需求:Paritok-4B是一个264MB的适配器,可以在单个24GB GPU上运行,无需每token费用,降低了推理成本。
  2. 高质量压缩:该模型在保留输入中96.0%的标识符、路径和数字的同时,实现了高效的压缩效果。
  3. 开源发布:模型权重、数据和评估脚本均已开源(Apache 2.0),便于研究人员和开发者进行进一步开发和优化。

行业影响

Paritok-4B的发布为智能体编码任务提供了高效的解决方案,特别是在处理大规模文件读取和工具输出时,能够显著降低上下文管理成本。其开源特性使其成为研究人员和开发者的宝贵资源,推动了智能体技术在代码生成和自动化任务中的应用。

开发者建议

  • 评估适用性:开发者应根据具体任务需求评估Paritok-4B的适用性,特别是在处理复杂代码结构时。
  • 结合其他工具:建议将Paritok-4B与其他智能体工具结合使用,以实现更高效的代码生成和任务执行。
  • 参与开源社区:开发者可以积极参与Paritok-4B的开源社区,分享使用经验和建议,共同推动模型的发展。

消息来源:ArXiv cs.AI (2026-08-25)

—— 完 ——

主题标签: #ArXiv #智能体 #LoRA #上下文压缩 #开源模型

编辑部与事实核查说明:本篇专刊由智客前沿资讯管线根据官方技术公告、学术论文及开源工程文档整理编译,经算法实体核验与人工编辑审校后发布。若发现技术事实纰漏,欢迎依据勘误方针或一键向编辑部发送勘误反馈。

读完这篇,你的第一判断是?
🚀 去【作品】晒出你的相关实践

社区整体评论区

正在加载实时智能评论与划词标注…