Skip to content

RVQActionTokenizer ​

RVQActionTokenizer

robotics-diffusion-transformer 在 Hugging Face 发布的机器人模型,架构为 Diffusion Policy (CNN / Transformer UNet),参数规模 436M。

模型robotics-diffusion-transformerRVQActionTokenizer

模型档案汇总架构、许可、适配机型与资料来源

RVQActionTokenizer

robotics-diffusion-transformer 在 Hugging Face 发布的机器人模型,架构为 Diffusion Policy (CNN / Transformer UNet),参数规模 436M。

  • 具身模型
  • 端侧部署
VLA研究436M更新于 8 个月前

概述

这个模型的核心架构、动作空间设计与真机部署定位。

RVQ-AT 是面向机器人动作流的 Residual Vector-Quantization 动作分词器,用于把连续控制轨迹转换为较短的离散动作 token 序列,并可直接接入自回归 VLA 模型。它提供通用 tokenizer,也提供在自定义动作数据集上拟合 tokenizer 的简单 API。

该方法不同于单码本 VQ,而是堆叠多个小码本,逐层量化残差;目标是在相同比特率下获得更高重建保真度、更短的同一时间跨度 token 序列,并通过 commitment loss、EMA codebook updates 和 dead-code revival 提升训练稳定性。发布的通用 RVQ-AT 在多样化 UMI manipulation 数据上训练,并称可在遥操作数据上较好泛化。

推荐使用约 0.8 秒动作窗口、fps=30,并在分词前用 normalizer 将每个动作维度归一化到 [-1, 1];支持批量 encode/decode。用于自有数据微调前,应检查数据统计是否落在该 RVQ 的范围内,并评估重建误差。decoded actions 不应未经 sim-to-real 验证、安全边界/限速、任务监控和急停机制就直接部署到硬件。许可证为 Apache-2.0。

资料出处 Hugging Face robotics-diffusion-transformer/RVQActionTokenizer

关键参数与架构规格

参数量、网络主干、控制频率、显存需求及 Hugging Face Hub 统计。

参数量
436M
Hub 下载量
439
出处Hugging Face
Hub 点赞
3
出处Hugging Face
网络架构
Diffusion Policy (CNN / Transformer UNet)
动作空间表示
连续扩散去噪轨迹 (Diffusion Action Trajectory)
支持数据格式
SafeTensors

暂未公开或待收录:微调显存需求 · 闭环控制频率

快速部署与许可说明

开源许可证、权重拉取命令、预训练数据集与关联文章。

代码许可证

apache-2.0

权重许可证

apache-2.0

权重下载与策略推理参考

# 1. 从 Hugging Face Hub 下载模型权重与配置
huggingface-cli download robotics-diffusion-transformer/RVQActionTokenizer --local-dir ./checkpoints/robotics-diffusion-transformer-rvqactiontokenizer

# 2. 使用 LeRobot / Transformers 加载策略开展真机或仿真闭环推理
python -m lerobot.scripts.eval --policy.path=robotics-diffusion-transformer/RVQActionTokenizer

关联机型

模型卡或论文声明在这些机器人上训练、微调或部署过;口径是作者声明,不是第三方复现。

没有已核实的适配记录。

同家族模型

同一家族里的热门模型。

来源

本页事实对应的公开页面,以原文为准。

  1. Hugging Face robotics-diffusion-transformer/RVQActionTokenizer访问 2026-10-21