外观
RVQActionTokenizer
robotics-diffusion-transformer 在 Hugging Face 发布的机器人模型,架构为 Diffusion Policy (CNN / Transformer UNet),参数规模 436M。
模型robotics-diffusion-transformerRVQActionTokenizer
模型档案汇总架构、许可、适配机型与资料来源
robotics-diffusion-transformer 在 Hugging Face 发布的机器人模型,架构为 Diffusion Policy (CNN / Transformer UNet),参数规模 436M。
这个模型的核心架构、动作空间设计与真机部署定位。
RVQ-AT 是面向机器人动作流的 Residual Vector-Quantization 动作分词器,用于把连续控制轨迹转换为较短的离散动作 token 序列,并可直接接入自回归 VLA 模型。它提供通用 tokenizer,也提供在自定义动作数据集上拟合 tokenizer 的简单 API。
该方法不同于单码本 VQ,而是堆叠多个小码本,逐层量化残差;目标是在相同比特率下获得更高重建保真度、更短的同一时间跨度 token 序列,并通过 commitment loss、EMA codebook updates 和 dead-code revival 提升训练稳定性。发布的通用 RVQ-AT 在多样化 UMI manipulation 数据上训练,并称可在遥操作数据上较好泛化。
推荐使用约 0.8 秒动作窗口、fps=30,并在分词前用 normalizer 将每个动作维度归一化到 [-1, 1];支持批量 encode/decode。用于自有数据微调前,应检查数据统计是否落在该 RVQ 的范围内,并评估重建误差。decoded actions 不应未经 sim-to-real 验证、安全边界/限速、任务监控和急停机制就直接部署到硬件。许可证为 Apache-2.0。
资料出处 Hugging Face robotics-diffusion-transformer/RVQActionTokenizer
参数量、网络主干、控制频率、显存需求及 Hugging Face Hub 统计。
暂未公开或待收录:微调显存需求 · 闭环控制频率
开源许可证、权重拉取命令、预训练数据集与关联文章。
代码许可证
apache-2.0
权重许可证
apache-2.0
# 1. 从 Hugging Face Hub 下载模型权重与配置
huggingface-cli download robotics-diffusion-transformer/RVQActionTokenizer --local-dir ./checkpoints/robotics-diffusion-transformer-rvqactiontokenizer
# 2. 使用 LeRobot / Transformers 加载策略开展真机或仿真闭环推理
python -m lerobot.scripts.eval --policy.path=robotics-diffusion-transformer/RVQActionTokenizer模型卡或论文声明在这些机器人上训练、微调或部署过;口径是作者声明,不是第三方复现。
没有已核实的适配记录。
同一家族里的热门模型。
本页事实对应的公开页面,以原文为准。