具身智能速查
60 分钟更新
具身智能速查阅读原文 · 追踪方法 · 连接实践
近期研究

Ego4WAM:扩大第一人称人类数据规模用于机器人学习时,什么最重要?

Ego4WAM: What Matters When Scaling Egocentric Human Data for Robot Learning?

仿真 + 实物代码待核实原文关键章节已核对

原文关键章节已核对

以下分析来自论文原文,保留实验条件与结果适用范围。

18 页 PDF · 6.9 MB归档日期 2026-10-04已核对方法、实验、结果与局限
从官方来源获取原文
原文依据范围

第3节方法,PDF第3–5页 · 第4节实验及表1–2,PDF第5–9页 · 第5节结论,PDF第9页 · 附录C.1–C.2设置,PDF第16页

原文来源与版本用于研究核对。公开可获取不等于允许全文转载;本站提供中文分析和官方原文链接。

基于原文的中文分析

方法机制

把数据分成任务对齐视频动作、多任务可靠动作与纯视频三层。世界视频分支和动作分支共享注意,双臂32维动作只在人机共同可解释维度监督;依次尝试视频预训练、视频动作中间训练与机器人适配,并比较动作能否读取预测未来视觉。

实验设置与硬件

双臂Piper真机测试装篮与叠布:每任务300条机器人示范,500条含对象/场景变化的人类示范。RoboDojo仿真固定常见500任务扩时长,或扩至6000任务;视频预训练15000小时,可靠动作中间训练12000小时并含约90小时机器人数据。

结果及统计口径

装篮对象分布外成功率可从10%升至60%。仅20条叠布机器人示范加对齐人类数据仍失败,加入多任务中间训练后ID达80%。RoboDojo基线成功率3.15%,视频预训练9.45%,未来视觉联合条件14.35%;长尾扩展可能损害精密操作。

局限与风险

纯视频与带动作阶段不等计算预算,不能只归因为监督类型。最佳配置在开放指令与记忆类仍弱,14.35%并非榜单最佳;人类侧见过的分布外对象不是完全未见对象。额外四项真机展示未给同等完整统计。

复现建议

复现需固定数据质量过滤、各来源比例、动作缺失掩码和未来注意可见性,并拆分任务数与每任务时长。论文组织的数据池约12万小时纯视频,不等于本实验实际训练用了12万小时。

这是原文分析,不是逐字全文译本,也不代表本站已复现实验。

实验标签与机器人

验证范围
仿真 + 实物
机器人型号
双臂Piper(真机)、RoboDojo仿真机器人

型号和使用场景以原文及上列说明为准;训练或离线采集平台不等于所提方法的实机闭环验证。

相关机器人档案

代码与训练

代码待核实 · 代码状态未核实

复现需固定数据质量过滤、各来源比例、动作缺失掩码和未来注意可见性,并拆分任务数与每任务时长。论文组织的数据池约12万小时纯视频,不等于本实验实际训练用了12万小时。 论文许可不代表代码许可,代码实际发布状态仍未知。

来源与分类证据

  • PDF第8页表1–2(已渲染核看):最终14.35%配置是video pretrain + joint posttrain,表中没有mid-train;不能笼统写三阶段全部叠加最佳。

    查看一手来源
  • PDF第7–8页§4.3:视频预训练实际为15K小时,video-action为12K小时,明确非compute-matched。

    查看一手来源
  • PDF第5–6页图3–4:真正物理执行为双臂Piper;对象OOD由人类演示覆盖。

    查看一手来源