原文关键章节已核对
以下分析来自论文原文,保留实验条件与结果适用范围。
原文依据范围
3.1–3.3 任务、数据来源与评估 · 4.1–4.7 六算法、观察/超参/模型选择消融及实机 · 附录E 硬件
原文来源与版本用于研究核对。公开可获取不等于允许全文转载;本站提供中文分析和官方原文链接。
方法机制
这是一项离线人类示范学习的系统比较,评估BC、带历史的BC-RNN、分层HBC、BCQ、CQL与IRIS,而非单一新策略。数据分机器生成、熟练单人200条、六位不同熟练度操作者共300条;控制数据质量、历史、观察模态、网络结构和检查点选择来分析性能来源。
实验设置与硬件
五项robosuite仿真任务覆盖抬升、分拣、套螺母、双臂传递与工具悬挂,三项在Franka Emika Panda实机验证。仿真每检查点50次在线展开、三种子,并报告训练期间最好结果;实机每任务200条示范,只评最终检查点30次,二者选模协议不同。
结果及统计口径
作者发现历史信息对长程与多人数据尤重要,BC-RNN通常强于BC;BCQ/CQL在混合人类数据上明显弱于其机器数据表现。实机Lift、Can、Tool Hang为96.7%、73.3%、3.3%;去图像随机移位或腕相机使Can降至26.7%、43.3%,显示观察工程的重要性。
局限与风险
结论限于当时算法和选定数据,不能推导离线RL普遍无效。仿真挑最好在线检查点带有不可直接用于真实离线部署的优势;验证损失或最后检查点的性能可显著下降。更大或更杂的数据不必然更好,极精细长程实机任务仍很弱。
复现建议
复现应固定数据版本、人类子集、回放序列、GMM动作头、ResNet/腕视角和训练预算;低维与图像设置不能混算。报告最终策略及选模成本,并保留工具悬挂低成功结果,公开框架本身不代表用户硬件可直接运行。
实验标签与机器人
- 验证范围
- 仿真 + 实物
- 机器人型号
- Franka Emika Panda
相关机器人档案
代码与训练
有开源代码 · MIT 框架代码、研究数据和训练模型公开。
当前仓库新增多种后续算法;复现 2021 研究应使用对应版本、数据划分与配置。
来源与分类证据
首发日期、六算法与仿真/实机任务数量。
查看一手来源附录硬件明确仿真与实机均使用 Panda。
查看一手来源MIT、数据入口和版本更新。
查看一手来源3.2/3.3:PH200 demonstrations;MH6×50;3 seeds;50 online rollouts/checkpoint;report maximum during training.
查看一手来源4.4/4.5:GMM/history/observation design matter;offline validation-loss model selection may fail.
查看一手来源4.7:Panda real datasets200 demos/task;30 rollouts final checkpoint;96.7/73.3/3.3%;no real hyperparameter tuning.
查看一手来源附录E:Franka Emika Panda used in simulation and real workspaces.
查看一手来源
