动察 Beating AI 快讯,杨立昆创办的 AMI Labs 联合布朗大学研究人员发表新论文《Counterfactual World Models》,让 JEPA 世界模型能够根据一次行动的真实结果,推算如果当时换个动作会怎样。这种能力叫「反事实推演」。
比如船向东航行,实际被暗流推偏了 2 米。模型虽然不知道暗流有多强,却能比较向东和向西两种航向的预测结果。它再把两种预测的差距,加到船实际到达的位置上,就能估算如果当时向西航行会在哪里。整个过程只有向东航行一次真实观测,向西的结果完全由模型推算。
在四个物理仿真环境中,团队借助额外训练的转换模块评估,反事实预测的 R² 从 38%–46% 提升至 86%–96%。在另一项事后规划测试中,模型找到原本能完成目标的动作的比例达到 35%–69%,对照方法只有 14%–23%。
这套方法有一个关键前提:动作和外部干扰的影响大致可以叠加。如果物体发生碰撞,或者电机故障导致不同指令受到的影响不同,预测可能失准。目前研究仍限于仿真环境,尚未验证真实机器人的实际控制效果。