原文关键章节已核对
以下分析来自论文原文,保留实验条件与结果适用范围。
原文依据范围
§III,PDF页3–5 · §IV-A–C及表I–III,PDF页5–6 · §IV-D–E及图5–9,PDF页7–8 · §V,PDF页8
原文来源与版本用于研究核对。公开可获取不等于允许全文转载;本站提供中文分析和官方原文链接。
方法机制
PAE将全景投为循环透视视图,冻结DINOv3、SigLIP和Qwen3主干,融合方位和历史时间编码。动作头预测8个累计航点;WAC预测前4步特征,按余弦差阈值决定继续或重新规划,辅助梯度只更新WAC。
实验设置与硬件
数据含5000条仿真跟随、10000条仿真导航和96条手持全景真实路线;仿真测试200跟随回合与400导航路线。真实数据76条训练、20条留出,另将模型部署至带Insta360 X4的Go2-W开展室内外跟随与导航。
结果及统计口径
仿真跟随成功率35%对复现TrackVLA的23.5%;导航19.75%对13%。加入76条真实路线使留出ADE从0.172降至0.038米。实机通过远端RTX4090约6.9 FPS推理、3.5Hz执行,展示多场景案例。
局限与风险
96条路线本身是手持相机数据,不是96次自主机器人完成;实机部分主要是定性演示,未给同规模闭环成功率。整体仿真导航成功仍低,拥挤跟随尤其困难;WiFi远端推理限制完全机载使用。
复现建议
复现需一致全景投影、方位/时间顺序、按路线隔离的数据划分及验证集选阈值。原文用8张RTX3090训练1轮、4个180度重叠视图和最多31帧历史;应分别复现离线航点误差、仿真闭环和实体案例。
实验标签与机器人
- 验证范围
- 仿真 + 实物
- 机器人型号
- Unitree Go2-W(实机)、OmniTrackNav-Bench导航代理(仿真)
型号和使用场景以原文及上列说明为准;训练或离线采集平台不等于所提方法的实机闭环验证。
代码与训练
代码待核实 · 代码状态未核实
复现需一致全景投影、方位/时间顺序、按路线隔离的数据划分及验证集选阈值。原文用8张RTX3090训练1轮、4个180度重叠视图和最多31帧历史;应分别复现离线航点误差、仿真闭环和实体案例。 论文许可不代表代码许可,代码实际发布状态仍未知。
