具身智能速查
60 分钟更新
具身智能速查阅读原文 · 追踪方法 · 连接实践
经典研究

通过大规模并行深度强化学习在数分钟内学会行走

Learning to Walk in Minutes Using Massively Parallel Deep Reinforcement Learning

仿真 + 实物有开源代码原文关键章节已核对

原文关键章节已核对

以下分析来自论文原文,保留实验条件与结果适用范围。

14 页 PDF · 36.7 MB归档日期 2026-10-04已核对方法、实验、结果与局限
从官方来源获取原文
原文依据范围

§2 · §3 · §4.1–4.3 · Figures 4–7 · §5

原文来源与版本用于研究核对。公开可获取不等于允许全文转载;本站提供中文分析和官方原文链接。

基于原文的中文分析

方法机制

把物理仿真、观测、回报、PPO及缓存全部留在GPU,用数千机器人同时采样。地形课程在同一网格上移动机器人切换难度,正确区分超时截断与失败终止;关节目标经学得的执行器模型转力矩,并施加噪声、摩擦和推动随机化。

实验设置与硬件

固定批量下扫描128到16384并行机器人,1500次更新、五次重复比较速度/回报。部署配置4096机器人、98304批量,在RTX A6000上不足20分钟训练;仿真还覆盖ANYmal B、带臂C、A1和Cassie,实机示范为ANYmal。

结果及统计口径

作者发现2048–4096并行、约10万至20万批量取得较佳折中;并行过高导致每机器人轨迹过短而退化。仿真20厘米台阶接近全成功,25度以上上坡困难;实机能上下楼梯,但因高度图误差把最高线速度降到0.6米/秒。

局限与风险

分钟级指特定GPU与固定任务的训练时间,不是无需模型、奖励调节或硬件标定。真实地形图和状态估计误差降低鲁棒性;不同形态仍需修改执行器、增益或奖励,不能称参数完全通用。

复现建议

应保留每环境采样长度、批量、超时bootstrap、地形课程和执行器模型,分别报告训练墙钟时间与实机安全速度。仿真A1/Cassie证据不能迁移成实机结论;未运行实现。

这是原文分析,不是逐字全文译本,也不代表本站已复现实验。

实验标签与机器人

验证范围
仿真 + 实物
机器人型号
ANYmal C、ANYmal B(仿真)、Unitree A1(仿真)、Cassie(仿真)

代码与训练

有开源代码 · 官方legged_gym训练环境公开;依赖Isaac Gym与配套RL库。

GPU并行仿真、PPO、地形课程及动力学随机化。

来源与分类证据