原文关键章节已核对
以下分析来自论文原文,保留实验条件与结果适用范围。
原文依据范围
3 Hardware · 4 Human Data · 5 Shadowing · 6 Imitation · 8–9 Experiments · Table 5 · 10 Limitations
原文来源与版本用于研究核对。公开可获取不等于允许全文转载;本站提供中文分析和官方原文链接。
方法机制
HumanPlus先把AMASS人体动作重定向到H1形态,在域随机化仿真中用PPO训练带历史的全身跟踪Transformer;单RGB相机实时估计人手与身体,控制机器人采集真实双目观察和动作。HIT再以行为克隆学习50步动作段,并加未来图像特征预测,抑制只依赖本体状态而忽视视觉。
实验设置与硬件
硬件为改装Unitree H1,加入两只Inspire RH56DFX及自制腕关节,共33自由度。真人跟随与自主模仿分开评价:六名用户做遥操作对比,自主任务每项25–40示范、十次测试,对照单目、ACT和开环回放。
结果及统计口径
作者报告自主折衣100%、重排/握手/仓储90%、打字80%,穿鞋站起走路60%;子任务百分比以到达该阶段的尝试数为分母。扰动恢复相对原厂控制器更快,但弹琴、乒乓、拳击等是人类跟随展示,不是同等自主技能结果。
局限与风险
每项仅十次,不能说明开放场景可靠性。四自由度手臂加腕仍不能覆盖任意末端姿态,固定相机存在视野盲区,遮挡影响人体估计;坐姿时绕过学习控制直接发关节目标,长程导航仍未解决。
复现建议
复现需改装硬件、固定姿态映射、AMASS处理、域随机化和双目同步。低层50Hz、PD1000Hz,人体/手估计约25/10fps;自主策略数据来自真机跟随,不能归纳为全流程仅靠仿真人体视频迁移。
实验标签与机器人
- 验证范围
- 仿真 + 实物
- 机器人型号
- Unitree H1(加装Inspire-Robots RH56DFX及腕关节)
相关机器人档案
代码与训练
有开源代码 · 官方HST、HIT训练及硬件代码公开。
先训练Humanoid Shadowing Transformer,再用真实遥操作数据训练Humanoid Imitation Transformer;需专门硬件与动作数据。
来源与分类证据
arXiv原始记录:标题、首发日期与方法摘要。
查看一手来源§3明确改装H1、RH56DFX手与定制腕;任务与实验分开报告跟随和自主模仿。
查看一手来源作者项目页、数据和硬件入口。
查看一手来源官方仓库含HST与HIT训练命令和硬件代码。
查看一手来源3–5:33DoF改装H1;仿真低层,真实跟随数据,高层模仿。
查看一手来源9; Table 5:十次/任务;各阶段分母为到达阶段次数。
查看一手来源5; 10:坐姿直接PD;遮挡、视野和自由度限制。
查看一手来源PDF p9, Table 5:已渲染完整表,六任务整段成功率100/90/80/90/90/60;阶段列分母随前序成功减少。
查看一手来源
