智客 ZICQ
EN 登录 / 注册
智客前沿 前沿论文 #ArXiv #物理推理 #多模态学习 #智能体 #可执行代码

ArXiv提出Code-as-World框架:革新物理推理的可执行世界表示方法

Mr.Xu 的头像

文 / Mr.Xu 智客前沿编译 · 审校

发布时间: · 1 次阅读

中文阅读 (Chinese) English Version
共读互动 选中正文任意句子即可高亮划线、写下你的技术批注,或一键生成金句引用卡。 直达讨论区 ↓

摘要:ArXiv团队提出了一种名为Code-as-World的新方法,通过将物理世界表示为可执行代码,为物理推理提供了一种紧凑、可量化且可控的抽象模型。该方法通过一个受溯因推理启发的智能体发现循环,从多模态数据(如自然语言描述或真实视频)中构建可执行世界表示。实验表明,基于Code-as-World的视觉-语言模型在QuantiPhy基准测试中达到了最先进的性能,展示了其在物理智能领域的潜力。


1. 技术背景与挑战

在物理理解和推理中,构建紧凑且可泛化的世界表示是核心挑战。尽管现代视觉-语言模型能够识别和解释多种物理事件,但它们通常缺乏对底层机制(如对象状态、物理参数和动态演化)的明确表示,这限制了其在复杂物理推理任务中的可靠性。

2. Code-as-World方法概述

Code-as-World通过将物理世界的组成、动态演化和视觉外观表示为可执行代码,提供了一种全新的世界表示方法。该方法的核心是一个受溯因推理启发的智能体发现循环,智能体提出、执行、渲染、验证并迭代优化可执行世界假设。

3. 主要技术亮点

  • 可执行代码表示:通过将物理世界表示为可执行代码,提供了对物理机制的高度可控和可量化的抽象。
  • 智能体发现循环:基于溯因推理的智能体循环,从多模态数据中构建和优化可执行世界表示。
  • 物理监督训练:利用验证后的可执行世界为视觉-语言模型提供可扩展的物理监督。

4. 实验结果与性能

在QuantiPhy基准测试中,Code-as-World-VL模型表现出色,超越了现有的领先专有模型,展示了其在定量物理推理任务中的强大能力。实验结果验证了该方法在处理复杂物理场景时的有效性和鲁棒性。

5. 行业影响与未来展望

Code-as-World为物理智能领域提供了一种新的基础方法,有望推动机器人技术、自动驾驶和虚拟现实等领域的进步。其可执行代码表示方法也为跨学科研究提供了新的思路,例如在物理引擎优化和模拟环境构建中的应用。

6. 对开发者的建议

  • 探索多模态数据融合:尝试将Code-as-World方法应用于其他多模态数据场景,如音频-视觉或触觉-视觉数据。
  • 优化智能体循环:进一步研究智能体发现循环的优化策略,以提高构建可执行世界表示的效率和准确性。
  • 扩展应用场景:探索该方法在机器人控制、虚拟现实和增强现实等领域的应用潜力。

消息来源:Hugging Face Daily Papers (2026-08-27)

—— 完 ——

主题标签: #ArXiv #物理推理 #多模态学习 #智能体 #可执行代码

编辑部与事实核查说明:本篇专刊由智客前沿资讯管线根据官方技术公告、学术论文及开源工程文档整理编译,经算法实体核验与人工编辑审校后发布。若发现技术事实纰漏,欢迎依据勘误方针或一键向编辑部发送勘误反馈。

读完这篇,你的第一判断是?
🚀 去【作品】晒出你的相关实践

社区整体评论区

正在加载实时智能评论与划词标注…