具身智能速查
60 分钟更新
具身智能速查阅读原文 · 追踪方法 · 连接实践
近期研究

FAST:视觉—语言—动作模型的高效动作词元化

FAST: Efficient Action Tokenization for Vision-Language-Action Models

仿真 + 实物有开源代码原文关键章节已核对

原文关键章节已核对

以下分析来自论文原文,保留实验条件与结果适用范围。

19 页 PDF · 7.1 MB归档日期 2026-10-04已核对方法、实验、结果与局限
从官方来源获取原文
原文依据范围

V-B–C · VI-A–F · Table I · VII Discussion · Appendix C–E

原文来源与版本用于研究核对。公开可获取不等于允许全文转载;本站提供中文分析和官方原文链接。

基于原文的中文分析

方法机制

FAST先将一秒动作段按维度做离散余弦变换,量化频域系数,按低频优先展开,再用BPE压缩为自回归动作词元。FAST+把词典训练在约百万跨形态动作段上;无需另训神经压缩网络,但量化仍有损失,BPE本身才是无损编码。

实验设置与硬件

以π0和OpenVLA骨干对比逐维分箱、FSQ及扩散控制,涵盖LIBERO和六类实机评估。硬件包括UR5e、ARX双臂、Trossen ViperX;DROID在新场景44次定量测试,另三校园演示仅定性。大型通用策略训练约一万小时动作数据。

结果及统计口径

作者报告50Hz双臂折衣的一秒动作从700词元压到53,压缩13.2倍;通用π0-FAST达到类似扩散π0表现所需GPU时约少五倍。但4090推理约750毫秒/段,对扩散约100毫秒,训练快不能写成运行快。

局限与风险

实机政策验证集中静态机械臂,手/人形/移动平台主要是离线压缩测试。FAST+词典混合包含评测任务的数据,不能称完全任务外训练;多个评价使用物体比例或任务进度而非整回合成功,衣物任务仍有高质量数据微调。

复现建议

复现需动作分位归一化、DCT量化尺度、低频展开及BPE词典;常用尺度10、词表1024。DROID设置筛选75K成功轨迹、去掉零动作,15步预测并执行8或15步;发布tokenizer不等于全部私有训练数据开放。

这是原文分析,不是逐字全文译本,也不代表本站已复现实验。

实验标签与机器人

验证范围
仿真 + 实物
机器人型号
UR5e、ARX双臂(型号未细化)、Trossen ViperX双臂、Franka(DROID评估)

原文另有双臂 ARX,但具体型号未核实,未塞入型号筛选;Franka 评估平台的更细型号未核实。

相关机器人档案

代码与训练

有开源代码 · 训练代码已开源

官方 Hugging Face 发布 FAST+ 和自定义词元器训练代码,标注 Apache-2.0;此范围不代表全部 VLA 预训练数据公开。

来源与分类证据