具身智能速查
60 分钟更新
具身智能速查阅读原文 · 追踪方法 · 连接实践
近期研究

FutureWorlds:从多种备选未来中学习机器人世界模型

FutureWorlds: Learning Robotic World Models from Alternative Futures

真实数据评测代码待核实原文关键章节已核对

原文关键章节已核对

以下分析来自论文原文,保留实验条件与结果适用范围。

32 页 PDF · 32.1 MB归档日期 2026-10-04已核对方法、实验、结果与局限
从官方来源获取原文
原文依据范围

3.1–3.4 · 4.1–4.5 · 5 · Appendix D,F,G · Tables 1–2

原文来源与版本用于研究核对。公开可获取不等于允许全文转载;本站提供中文分析和官方原文链接。

基于原文的中文分析

方法机制

用离散自回归视觉模型预测固定动作序列下的多个未来;多样化beam search产生候选,每个候选单独保留初始锚点与滚动历史。MemSPO按视频轨迹奖励计算组内优势,生成和概率打分使用同一历史,避免候选分叉后记忆错配。

实验设置与硬件

RT-1、BridgeV2和RoboCasa各128条固定留出轨迹,比较32帧预测的PSNR、SSIM、LPIPS及光流;固定解码与权重做记忆消融,并测试200次后训练更新。另有冻结RT-1策略在生成世界内关抽屉的单个定性例子。

结果及统计口径

LPIPS相对各集最强基线下降14.78%、20.84%、9.12%;去掉历史使32帧MSE明显恶化,多数收益来自近期历史。含视觉编解码器约2.57亿参数、1.89GiB峰值显存,但32帧beam推理26.76秒,比iVideoGPT的4.14秒慢。

局限与风险

主要是离线视频及学习模型内部反馈评估,没有实体机器人闭环任务成功证据;视频指标改善不能等同物理正确。beam筛选改变采样分布,作者明确不保证无偏同策略梯度;不同模型原生推理设置也不完全相同。

复现建议

先锁定128条轨迹、预测帧和缩放规则,分别复现SFT、普通beam后训练和多样搜索。必须记录候选记忆、奖励组件、CPU/GPU解码及延迟;不能把小参数量直接解释为实时机器人速度。

这是原文分析,不是逐字全文译本,也不代表本站已复现实验。

实验标签与机器人

验证范围
真实数据评测
机器人型号
未核实

代码与训练

代码待核实 · 训练代码待核实

仅核对摘要;官方实现、许可证与训练入口尚待核实。

来源与分类证据

  • 依据原文摘要;实验范围与型号待全文复核

    查看一手来源
  • 3.4; 4.1–4.5:搜索偏差声明、固定评估、视觉与动态指标。

    查看一手来源
  • Appendix D; 5; Appendix G:生成世界单例不确立物理成功,资源与延迟范围。

    查看一手来源
  • 3.4; 4.1–4.5:搜索偏差声明、固定评估、视觉与动态指标。

    查看一手来源
  • Appendix D; 5; Appendix G:生成世界单例不确立物理成功,资源与延迟范围。

    查看一手来源