25亿Token轨迹数据集公开：收录GPT-5.5工具调用样本

摘要：社区在 Hugging Face 发布经脱敏处理的 Codex 工具调用轨迹数据集，覆盖约 250 亿 Token，并包含 12,121 次工具调用。原始帖子将其描述为 GPT-5.5 使用过程中的数据集，但现有信息未说明具体模型版本、采样条件、任务分布和数据许可。该资源的核心价值是为工具调用、Agentic Workflow、轨迹监督和智能体后训练提供大规模真实交互样本；不过，数据来源透明度、敏感信息残留、工具调用成功率与重复轨迹偏差仍需核查，不能仅凭 Token 数量推断训练价值。

---

数据集公开了什么

社区贡献者已在 Hugging Face 发布 codex-tool-use-trajectories，并对内容进行了脱敏处理。帖子披露的规模约为 250 亿 Token，包含 12,121 次工具调用。原始标题将数据与 GPT-5.5 关联，但现有信息没有提供模型版本验证、采样区间或原始工作负载说明，因此更稳妥的表述是：这是一份被发布者归因于 GPT-5.5 使用过程的 Codex 工具调用轨迹数据集。

与只包含“问题—回答”的普通指令数据相比，工具调用轨迹保留了智能体执行任务时的中间状态，例如工具选择、参数构造、工具返回和后续决策。这类数据更接近 Agentic Workflow 的真实监督信号，可用于研究模型何时调用工具、如何组织参数，以及如何根据工具输出修正下一步行动。

为什么 12,121 次调用比 Token 总量更关键

250 亿 Token 只能说明语料规模较大，却不能直接说明数据集适合训练。工具调用数据的核心单位应是一条包含上下文的完整决策轨迹，而不只是孤立函数调用。对训练集而言，更重要的统计量包括：

• 每次调用的工具名称与参数结构；
• 工具成功、失败、超时及重试比例；
• 工具结果长度与任务复杂度分布；
• 同一任务中的调用轮数和上下文长度；
• 失败后是否进行有效纠错；
• 是否包含重复请求、低价值重试或冗长工具输出。

如果失败调用占比较高，数据集仍可能具有研究价值，因为模型需要学习错误恢复；但若大量样本只是同一工作负载的机械重复，名义 Token 数会明显高估有效训练量。因此，训练前应按任务、用户会话或轨迹簇进行去重，而不是只做精确文本去重。

对 Agentic Workflow 训练的实际价值

该数据集可支持几类直接实验：

1. 工具调用监督微调：将状态、工具选择和参数生成组织成结构化训练样本。
2. 过程监督：依据工具返回构建动作质量标签，而不只拟合最终答案。
3. 失败恢复训练：保留参数错误、超时与无效调用，训练模型识别失败并修正策略。
4. 轨迹筛选与偏好学习：比较同一任务下成功调用链和低效调用链，构造偏好对。
5. 长上下文压缩研究：压缩重复的工具输出，同时尽量保留后续动作所需的状态。

如果数据以 JSONL 形式组织，常见字段会包括提示词、模型输出、工具调用列表、工具结果和会话标识。训练管线应先验证 Schema 一致性，再对工具名称、参数类型和结果编码进行规范化。若直接拼接所有轨迹，模型可能学到会话模板、重复前缀乃至个人工作习惯，而不是通用的工具使用能力。

隐私与数据质量风险

“已脱敏”并不等于“可直接用于训练”。工具轨迹可能包含文件名、代码片段、内部 URL、查询参数、终端输出、错误堆栈及环境信息。即使删除明显姓名，结构化标识符仍可能重新识别个人或组织。若数据包含检索结果或网页内容，还需要考虑版权、robots 规则及数据留存边界。

建议在下载后执行以下检查：

• 使用正则与密钥扫描器检查 API Key、令牌、密码和私钥；
• 对邮箱、IP 地址、域名、绝对路径及用户名进行二次扫描；
• 统计不同工具和任务模板的覆盖率；
• 测量重复率与近重复率；
• 对工具参数运行 Schema 校验；
• 抽样核验“工具调用—工具结果—下一步动作”是否完整闭合；
• 在发布或商用前确认数据许可与原始内容授权范围。

工程成本与训练取舍

大规模轨迹并不必然带来更好的智能体。若直接进行全参数 SFT，数据去重、上下文长度和训练成本都会迅速上升。更经济的路线是先做两阶段处理：先用规则与小型分类器过滤明显无效、重复或高风险样本，再对剩余数据执行按工具类别和任务难度加权的采样。

对于多工具场景，还需注意长轨迹的信用分配问题。最终答案正确，不代表中间每次工具调用都合理；反之，轨迹中一次局部失败也可能通过后续重试被成功修复。实践中可结合规则验证器、工具执行环境和结果级奖励，对工具轨迹进行重新标注，而不是把所有记录视为同等权重的正样本。

开发者建议

建议先抽取 1,000 至 10,000 条轨迹做质量审计，统计工具分布、失败率、平均调用深度、重复率和敏感信息命中率。随后用小规模模型完成一次工具调用 SFT，并与普通 JSON 指令数据基线比较。评测不应只看最终回答准确率，还应覆盖工具选择准确率、参数可执行率、无效调用率、平均调用次数及任务成本。

如果数据集最终确实来自 GPT-5.5，它还可能成为观察新模型工具使用习惯的窗口；但在没有官方确认或可复现采样说明前，应把这一版本归属视为发布者陈述，而非已独立验证的事实。

---

消息来源：Reddit r/LocalLLaMA (2026-11-08)

—— 完 ——

主题标签： #工具调用数据集 关注 #Agentic Workflow 关注 #轨迹监督 关注 #GPT-5.5 关注 #Hugging Face 关注