arXiv研究：优化LLM在行为数据聚合预测中的推理方法

摘要：本研究探讨了如何利用大语言模型（LLM）结合个体行为历史预测用户群体中采取特定行为的比例，特别是在电子商务领域。研究重点关注两种设计选择：汇总产品会话以减少推理成本但可能丢失预测细节，以及逐个会话预测后汇总以保留细节但增加推理成本。研究发现，在单独评估产品时，逐个会话的预测表现更优；而在联合评估产品时，汇总预测则表现更佳。此外，跨产品比较的汇总预测在15种设置中有12种达到了最高的Spearman相关系数，显著提升了预测准确性，同时大幅降低了推理成本。

---

研究背景与动机

在电子商务等场景中，利用大语言模型（LLM）预测用户行为已成为一种重要手段。然而，如何有效地结合个体行为历史以预测群体行为比例仍是一个具有挑战性的问题。本研究旨在探讨两种设计选择对预测性能的影响：

1. 汇总产品会话：在推理前对产品会话进行汇总，以减少推理成本，但可能丢失预测细节，增加偏差。
2. 逐个会话预测后汇总：保留每个会话的预测细节，但需要多次调用模型以减少方差。

技术机制剖析

研究通过以下方式评估了上述两种选择：

• 跨产品比较：在单个提示中评估多个产品，帮助模型推断典型情况，减少偏差，但同时引入噪声，因为预测结果依赖于其他产品的出现。
• Bayesian模型解释：通过贝叶斯模型解释第二种权衡，表明当提示中的输入更能揭示产品间差异时，比较对汇总预测的帮助更大。

工程权衡与实测表现

实验在五个LLM和两个数据集上进行了评估，结果表明：

• 单独评估产品时：逐个会话的预测表现优于汇总预测。
• 联合评估产品时：汇总预测表现更佳，尤其是在跨产品比较的情况下，汇总预测在15种设置中的12种达到了最高的Spearman相关系数。
• 推理成本：汇总预测的推理成本仅为会话方法的小部分。

开发者落地与部署建议

对于开发者而言，本研究的发现具有以下启示：

• 权衡推理成本与预测精度：在资源受限的场景下，汇总预测是一个有效的选择，尤其在需要处理大量产品时。
• 利用跨产品比较提升性能：通过在提示中引入比较上下文，可以显著提升预测准确性。
• 结合Bayesian模型进行解释：理解不同设计选择的权衡，有助于在具体应用场景中做出更明智的决策。

结论

本研究为LLM在行为数据聚合预测中的应用提供了新的见解，强调了跨产品比较在提升预测性能方面的重要性，并为实际应用中的推理成本与精度权衡提供了指导。

---

消息来源：ArXiv Machine Learning (cs.LG) (2026-10-21)

—— 完 ——

主题标签： #LLM 关注 #推理优化 关注 #行为预测 关注 #电子商务 关注 #Bayesian模型 关注