Skip to content

CogACT-Small ​

CogACT-Small

CogACT 在 Hugging Face 发布的机器人模型,架构为 CogACT (VLM + DiT Action Module)。

模型CogACTCogACT-Small

模型档案汇总架构、许可、适配机型与资料来源

CogACT-Small

CogACT 在 Hugging Face 发布的机器人模型,架构为 CogACT (VLM + DiT Action Module)。

  • 具身模型
  • 端侧部署
VLA研究80M更新于 2024-12-04

概述

这个模型的核心架构、动作空间设计与真机部署定位。

CogACT-Small 是一个 Vision-Language-Action 模型,输入语言指令和单视角 RGB 图像,预测后续 16 个归一化机器人动作。动作由 7-DoF 末端执行器增量组成,包括 x、y、z、roll、pitch、yaw 和 gripper,面向机器人操控中的语言、图像到动作预测。

该模型采用组件化 VLA 架构,由 VLM 输出条件化专用动作模块,而不是简单将 VLM 通过动作量化直接改作动作预测。其视觉骨干为 DINOv2 ViT-L/14 和 SigLIP ViT-So400M/14,语言模型为 Llama-2,动作模型为 DiT-Small,预训练数据为 Open X-Embodiment 的一个子集。

预测动作需要依据数据集统计量进行反归一化,并可选使用 Adaptive Action Ensemble 进行整合。模型可在 Open-X 预训练混合中见过的机器人设置上零样本控制,也可用极少量演示针对新任务和机器人设置微调;代码和预训练权重采用 MIT 许可证。

资料出处 Hugging Face CogACT/CogACT-Small

关键参数与架构规格

参数量、网络主干、控制频率、显存需求及 Hugging Face Hub 统计。

参数量
80M
Hub 下载量
61
出处Hugging Face
Hub 点赞
5
出处Hugging Face
网络架构
CogACT (VLM + DiT Action Module)
动作空间表示
连续关节动作块 (Action Chunking)
支持数据格式
SafeTensors

暂未公开或待收录:微调显存需求 · 闭环控制频率

快速部署与许可说明

开源许可证、权重拉取命令、预训练数据集与关联文章。

代码许可证

mit

权重许可证

mit

权重下载与策略推理参考

# 1. 从 Hugging Face Hub 下载模型权重与配置
huggingface-cli download CogACT/CogACT-Small --local-dir ./checkpoints/cogact-cogact-small

# 2. 使用 LeRobot / Transformers 加载策略开展真机或仿真闭环推理
python -m lerobot.scripts.eval --policy.path=CogACT/CogACT-Small

关联机型

模型卡或论文声明在这些机器人上训练、微调或部署过;口径是作者声明,不是第三方复现。

没有已核实的适配记录。

同家族模型

同一家族里的热门模型。

来源

本页事实对应的公开页面,以原文为准。

  1. Hugging Face CogACT/CogACT-Small访问 2026-10-21