arXiv研究：基于物理标签提示的大语言模型优化工程模拟器校准

摘要：本研究探讨了利用大语言模型（LLM）基于物理诊断描述进行工程模拟器校准的潜力。研究发现，LLM在初始阶段能够显著提升校准效率，在25次试验中，LLM的首次建议在23次中改进了初始设计，且在五次评估后，校准误差中位数比无物理信息的对照组低21.9倍。然而，这种优势在15次评估后逐渐消失，且LLM解码器的固有变异性导致性能波动达到9.8倍。为解决这一问题，研究提出了一种混合工作流程，将LLM作为预热启动，随后将评估结果传递给传统优化器。该方法在仅9次模拟器运行中达到目标精度，优于单独使用LLM（12次运行）、Nelder-Mead（17次运行）和贝叶斯优化（>60次运行）。

---

研究背景与动机

在工程模拟器校准过程中，参数调整需要与参考数据匹配，但这一过程受限于高昂的计算成本。传统上，衍生自由优化器被广泛用于此类任务，但它们在处理复杂问题时效率较低。本研究旨在探索大语言模型（LLM）是否能够基于物理诊断描述提出更高效的参数更新建议。

方法与实验

研究在圆柱尾流大涡模拟和阻尼振荡器逆问题中测试了LLM的性能。LLM的物理标签提示与四种文本消融（移除、匿名化、填充、误导）和标准优化器（Nelder-Mead、贝叶斯优化、CMA-ES和随机搜索）进行了对比。

主要发现

1. 早期语义优势：LLM的首次建议在25次试验中的23次中改进了初始设计。
2. 校准误差显著降低：在五次评估后，LLM的校准误差中位数比无物理信息的对照组低21.9倍。
3. 性能波动与衰减：然而，这种优势在15次评估后消失，且LLM解码器的固有变异性导致性能波动达到9.8倍。
4. 混合工作流程的优越性：为了解决上述问题，研究提出了一种混合方法，将LLM作为预热启动，随后将评估结果传递给传统优化器。该方法在仅9次模拟器运行中达到目标精度，优于单独使用LLM（12次运行）、Nelder-Mead（17次运行）和贝叶斯优化（>60次运行）。

工程权衡与实际应用

尽管LLM在早期阶段表现出色，但其性能波动和衰减问题限制了其作为独立校准工具的实用性。混合方法通过结合LLM的语义理解和传统优化器的稳定性，提供了更可靠的解决方案。该方法特别适用于计算资源有限且对精度要求高的场景。

开发者建议

对于希望利用LLM进行工程模拟器校准的开发者，建议采用混合工作流程，以充分利用LLM的早期优势并规避其性能波动问题。此外，开发者应关注LLM解码器的变异性，并考虑使用多模型集成策略以提高稳定性。

---

消息来源：ArXiv Machine Learning (cs.LG) (2026-10-19)

—— 完 ——

主题标签： #大语言模型 关注 #工程模拟 关注 #混合优化 关注 #物理标签 关注 #校准 关注