外观
rdt-1b
robotics-diffusion-transformer 在 Hugging Face 发布的机器人模型,架构为 Diffusion Policy (CNN / Transformer UNet),参数规模 1B。
模型robotics-diffusion-transformerrdt-1b
模型档案汇总架构、许可、适配机型与资料来源
robotics-diffusion-transformer 在 Hugging Face 发布的机器人模型,架构为 Diffusion Policy (CNN / Transformer UNet),参数规模 1B。
这个模型的核心架构、动作空间设计与真机部署定位。
RDT-1B 是一个 1B 参数的模仿学习 Diffusion Transformer,用于 Vision-Language-Action 任务。它以语言指令、最多三路 RGB 图像、控制频率(如有)和本体感知为输入,可预测接下来的 64 个机器人动作。模型类型为基于 Transformer 的 Diffusion Policy,视觉骨干为 siglip-so400m-patch14-384,语言模型为 t5-v1_1-xxl。
该模型在 100 万以上多机器人 episodes 上预训练,预训练数据来自 46 个数据集,包括 RT-1 Dataset、RH20T、DROID、BridgeData V2、RoboSet 以及 Open X-Embodiment 的一个子集。它通过统一动作空间支持多种现代移动操作臂形态,覆盖单臂到双臂、关节到末端执行器、位置到速度以及轮式移动等物理量。
部署到具体机器人平台时,需要将原始动作向量中的相关量填入统一空间向量。由于 embodiment gap,RDT 目前不能泛化到预训练数据集中未见过的新机器人平台;这种情况下建议采集目标机器人的小数据集并进行微调。代码、预训练权重和数据采用 MIT 许可证。
参数量、网络主干、控制频率、显存需求及 Hugging Face Hub 统计。
暂未公开或待收录:微调显存需求 · 闭环控制频率
开源许可证、权重拉取命令、预训练数据集与关联文章。
代码许可证
mit
权重许可证
mit
# 1. 下载 RDT 双臂扩散 Transformer 预训练权重
huggingface-cli download robotics-diffusion-transformer/rdt-1b --local-dir ./checkpoints/robotics-diffusion-transformer-rdt-1b
# 2. 启动双臂 128 维统一动作空间推理
python -m scripts.inference --pretrained_model_name_or_path=./checkpoints/robotics-diffusion-transformer-rdt-1b模型卡或论文声明在这些机器人上训练、微调或部署过;口径是作者声明,不是第三方复现。
| 适配机型 | 实测说明与帧率表现 | 记录日期 |
|---|---|---|
| 松灵 PiPER | 清华大学 RDT-1B(10亿参数双臂扩散基础模型)在 AgileX Mobile ALOHA / PiPER 双臂平台上完成真机灵巧操作验证。 | 2026-10-21 |
| FR3 Duo | RDT-1B 统一 128 维双臂动作空间,直接适配 Franka FR3 Duo 双臂协同操作。 | 2026-10-21 |
| Franka FR3 | RDT-1B 预训练涵盖 Franka 机械臂轨迹,支持单臂/双臂 Franka FR3 微调。 | 2026-10-21 |
| 星海图 R1 | RDT-1B 支持轮式双臂机器人(如星海图 R1 20+DoF 构型)通过少量遥操轨迹微调。 | 2026-10-21 |
| 宇树 G1 | RDT-1B 双臂动作表示支持映射到宇树 G1 双 7DoF 手臂。 | 2026-10-21 |
同一家族里的热门模型。
本页事实对应的公开页面,以原文为准。