具身智能速查
60 分钟更新
具身智能速查阅读原文 · 追踪方法 · 连接实践
近期研究

PROMO:面向四足机器人的偏好条件化多目标强化学习

PROMO: Preference-conditioned Multi-Objective Reinforcement Learning for Quadrupedal Robots

仿真 + 实物代码待核实原文关键章节已核对

原文关键章节已核对

以下分析来自论文原文,保留实验条件与结果适用范围。

18 页 PDF · 7.8 MB归档日期 2026-10-04已核对方法、实验、结果与局限
从官方来源获取原文
原文依据范围

III-A–D · IV-A–E · V-A–B · VI-C · Table III · Appendix A–B

原文来源与版本用于研究核对。公开可获取不等于允许全文转载;本站提供中文分析和官方原文链接。

基于原文的中文分析

方法机制

PROMO把速度跟踪、身体稳定、能耗效率分成可调语义目标,将步态与接触正则保持为固定先验。偏好向量同时输入策略和历史编码,三头价值网络分别学习语义回报;特权编码在训练中对齐可部署历史表示,部署只保留本体观测、速度估计与单一策略。

实验设置与硬件

IsaacLab中4096个Go2平地环境训练,随机化摩擦、惯性、质心和扰动。模拟密集测试100偏好;实机Go2在Vicon场地使用同一检查点,四种偏好乘三种指令条件各五次,策略50Hz、底层200Hz。每段试验偏好固定,只有重放条件严格共享指令轨迹。

结果及统计口径

作者报告100偏好中67个采样行为非支配,平均偏好—目标相关0.843;实机不同偏好相对均衡设置最多降低单位距离能耗30.4%、位置误差38.7%、姿态峰值59%。这些最大值来自不同条件,不是一次运行同时实现。

局限与风险

跟踪位置更好可伴随速度RMSE或能耗更差;慢速稳定偏好的速度误差为2.203米/秒。五次/条件不能支持密集真机可控性或统计显著性,非支配样本不是全球Pareto最优证明,手动扰动恢复仅定性。

复现建议

复现依赖完整奖励分解、偏好采样、固定先验和域随机化范围;附录提供网络、十步历史及控制配置。应分别核对实机四锚点与仿真100偏好,不能把接口可调直接表述为已验证连续在线切换。

这是原文分析,不是逐字全文译本,也不代表本站已复现实验。

实验标签与机器人

验证范围
仿真 + 实物
机器人型号
Unitree Go2

相关机器人档案

代码与训练

代码待核实 · 训练代码待核实

仅核对摘要;官方实现、许可证与训练入口尚待核实。

来源与分类证据