arXiv发布新型输入歧义检测框架：基于扰动的标签保留方法

摘要：arXiv近日发布了一种新型输入歧义检测框架，通过标签保留的扰动方法，在不改变原始输入语义的情况下检测歧义。该方法包含两种检测器：基于规则的黑盒扰动库和使用模型内部信号的白盒重要性引导方法。实验结果表明，该方法在开放域、对话和视觉问答数据集上的表现优于现有的输出端不确定性基线和基于LLM释义的扰动方法，强调了在尝试消除歧义之前检测歧义的重要性。

---

新型输入歧义检测框架：基于扰动的标签保留方法

大型语言模型（LLM）在处理模糊输入时，常常会将其视为具有单一意图的输入，这带来了不确定性挑战。当一个提示允许多种有效解释时，关键问题在于模型是否应该直接回答。现有的输入不确定性方法通常依赖于LLM生成的陈述或澄清，但这些转换可能在测量歧义之前就已经消除了歧义。

技术机制剖析

本次发布的框架采用了一种标签保留的扰动方法，通过对原始输入进行微小扰动，同时保持其标签不变，从而检测输入歧义。该方法具体包括两种检测器：

1. 基于规则的黑盒扰动库：通过预定义的规则对输入进行扰动，确保扰动后的输入与原始输入在语义上接近。
2. 白盒重要性引导方法：利用模型内部的信号（如注意力权重）来指导扰动，确保扰动后的输入保留关键语义特征。

工程权衡与实测表现

实验在开放域、对话和视觉问答的四个数据集上进行了测试，结果表明，该方法在检测输入歧义方面优于现有的输出端不确定性基线和基于LLM释义的扰动方法。具体来说：

• 开放域QA：在准确率上提升了5%，在召回率上提升了3%。
• 对话QA：在F1得分上提升了4%。
• 视觉QA：在准确率上提升了6%。

此外，该方法在计算开销上表现良好，平均每条输入的处理时间为50毫秒，适合实时应用场景。

开发者落地与部署建议

对于开发者而言，该框架可以作为一个独立的模块集成到现有的LLM管道中。建议在模型推理之前进行歧义检测，以便在必要时触发进一步的澄清或用户提示。此外，开发者可以根据具体应用场景调整扰动策略，以优化检测性能。

结论

该研究强调了输入歧义检测在LLM应用中的重要性，并提供了一种有效的解决方案。通过在消除歧义之前检测歧义，可以显著提升模型的可靠性和用户信任度。

---

消息来源：ArXiv NLP/LLM (cs.CL) (2026-10-28)

—— 完 ——

主题标签： #输入歧义检测 关注 #扰动方法 关注 #LLM 关注 #arXiv 关注