原文关键章节已核对
以下分析来自论文原文,保留实验条件与结果适用范围。
原文依据范围
4.1–4.2 · 5 · Appendix G–H · Tables 1–3
原文来源与版本用于研究核对。公开可获取不等于允许全文转载;本站提供中文分析和官方原文链接。
方法机制
RDT把动作建模为多模态连续分布,用扩散Transformer预测动作块;物理状态/动作使用傅里叶特征,语言与图像用预训练编码。跨机器人数据按物理含义填入统一动作槽并掩码,减少异构维度混淆,再在目标双臂平台微调。
实验设置与硬件
46数据集、百万余轨迹预训练,目标集6000多轨迹、300多任务;重点实机评测未见杯子和房间、指定手与水量、五示范交接、一示范叠衣及操纵遥控器。硬件为AgileX制造的Cobot Mobile ALOHA。
结果及统计口径
叠短裤一示范后成功68%,从头RDT40%;五示范交接40%,从头16%;未见房间倒水总成功62.5/100/62.5。DPM-Solver++把100步降至5步,4090约每秒6个动作块,381是动作采样吞吐而非381Hz闭环视觉更新。
局限与风险
移动底盘仅用于搬运场景,训练和测试都是静态双臂操作;无法据名称声称移动操作能力。不同任务试验数有限,综合表现还平均附加指令指标;预训练48张H100一月,完整复现成本高。
复现建议
优先在公开目标数据做小模型或微调,严格复核统一动作各槽的单位、mask和相机历史;分别报告总成功、正确手、正确水量。基线双臂适配、动作块及目标集划分必须匹配。
实验标签与机器人
- 验证范围
- 实物实验
- 机器人型号
- Cobot Mobile ALOHA(AgileX)
AgileX 制造的 Cobot Mobile ALOHA;底盘仅便于搬运,实验是静态双臂操作。
代码与训练
有开源代码 · 训练代码已开源
官方训练/微调实现与模型入口公开;代码 MIT,预训练数据各来源的权限仍应分别核对。
