# Σ-LeWM引入双向动力学损失提升机器人世界模型规划效率

> 原文链接：https://robotics.hellobike.com/papers/2026-11-10-2611-12732-327588ca
> 频道：papers | 更新日期：2026-11-10 | 标签：auto, arxiv
> 核心摘要：针对无解码器世界模型LeWorldModel，提出Σ-LeWM架构，新增后向与逆动力学预测损失以强化潜空间结构。在标准基准及两项仿真操作任务中验证，该方法显著提升了实时模型预测控制的性能与规划效率。

# Σ-LeWM引入双向动力学损失提升机器人世界模型规划效率

::: v-pre
> 本文由 AI 根据公开内容整理，可能有误，请以原文为准：[$\Sigma$-LeWM: Learning World Models via S-Information for Robot Control](https://arxiv.org/abs/2611.12732)（arXiv 2611.12732）

## 核心内容

针对当前无解码器世界模型（如JEPA、LeWorldModel）仅依赖前向动力学预测器和熵稳定项导致潜空间结构不足的问题，研究团队提出Σ-LeWM架构。该工作旨在解决真实机器人实时基于模型的控制难题，通过在原有框架基础上引入额外的潜在损失函数，强制约束嵌入表示的结构化程度。实验表明，这一改进在标准世界模型基准测试及两个模拟机器人操作任务中均取得了性能与规划效率的双重提升。

Σ-LeWM的核心技术增量在于为LeWorldModel增加了两个关键损失项：后向动力学预测器（Backward Dynamics Predictor）与逆动力学动作预测器（Inverse Dynamics Action Predictor）。不同于早期依赖解码器防止模式坍塌的方法，该方案完全在无解码器的潜空间中运作，利用双向动力学约束增强状态表征的可预测性与因果一致性。这种结构化嵌入直接优化了下游MPC求解器的搜索空间，使其更适配对计算延迟敏感的实体机器人实时控制场景。

## 关键看点

- **架构创新**：在LeWorldModel基础上新增后向动力学与逆动力学动作预测器，构建双向潜在损失机制以强化嵌入结构
- **去解码器范式**：摒弃传统像素级重建解码器，仅依靠潜空间前向/后向/逆动力学预测器与熵项学习可控表征
- **性能验证**：在标准世界模型基准及两项仿真机械臂操作任务中，证实了新损失项对控制性能与规划效率的提升
- **实时控制导向**：通过结构化潜空间降低MPC规划计算负载，旨在解决无解码器世界模型在真机实时部署中的瓶颈

## 工程与产业观察

Σ-LeWM证明了在无解码器世界模型中引入双向动力学约束是提升具身智能控制效能的有效路径。对于算法工程师而言，这意味着在不增加视觉重建算力的前提下，可通过纯潜空间的自监督信号获得更适合MPC的状态表征。该方向为缓解端到端大模型推理延迟与高频实时控制之间的矛盾提供了轻量化理论支撑，值得在Sim-to-Real迁移研究中重点关注。

## 英文摘要 (Abstract)

World models have increasingly been applied as a model-based control method for robotics tasks such as manipulation and locomotion. While early world model architectures relied on decoders to prevent mode collapse and learn a predictable latent space, recent works on world models, such as Joint Embedding Predictive Architecture or LeWorldModel, increasingly aim to learn embeddings without a grounding decoder, utilising only a latent forward dynamics predictor and a stabilising entropy term. In this paper, we set out to demonstrate that the further introduction of two additional latent losses to LeWorldModel, a backward dynamics predictor and an inverse dynamics action predictor, enforces further structure on the latent embedding, leading to further gains in both performance and planning efficiency. These are critical properties for improving the applicability of such methods to real-time model-based control of real-world robots. We demonstrate these gains on standard world model benchmarks and two simulated robot manipulation tasks.

作者：Xinrui Zu, Michael Przystupa, Zhao Yang, Shujian Yu, Kevin Sebastian Luck
:::

## 原始参考来源 (Sources)

- [arXiv 2611.12732：$\Sigma$-LeWM: Learning World Models via S-Information for Robot Control](https://arxiv.org/abs/2611.12732)