Skip to content

CogACT-Large ​

CogACT-Large

CogACT 在 Hugging Face 发布的机器人模型,架构为 CogACT (VLM + DiT Action Module)。

模型CogACTCogACT-Large

模型档案汇总架构、许可、适配机型与资料来源

CogACT-Large

CogACT 在 Hugging Face 发布的机器人模型,架构为 CogACT (VLM + DiT Action Module)。

  • 具身模型
  • 端侧部署
VLA研究80M更新于 2024-12-04

概述

这个模型的核心架构、动作空间设计与真机部署定位。

CogACT-Large 是一个 Vision-Language-Action 模型,输入语言指令和单视角 RGB 图像,用于预测机器人动作。它面向“语言、图像到机器人动作”的场景,一次输出接下来 16 个归一化机器人动作,动作形式为 7-DoF 末端执行器增量:x、y、z、roll、pitch、yaw 和 gripper。

该模型采用组件化 VLA 架构,不是简单将 VLM 通过动作量化改作动作预测,而是在 VLM 输出条件下使用专门的动作模块。其视觉骨干包括 DINOv2 ViT-L/14 和 SigLIP ViT-So400M/14,语言模型为 Llama-2,动作模型为 DiT-Large;预训练数据来自 Open X-Embodiment 的一个子集。

CogACT 可在 Open-X 预训练混合中出现过的机器人设置上进行 zero-shot 控制,也可用少量演示针对新任务和新机器人设置微调。输出动作需要依据数据集统计进行反归一化,并可选择通过 Adaptive Action Ensemble 集成。代码和预训练权重采用 MIT 许可证。

资料出处 Hugging Face CogACT/CogACT-Large

关键参数与架构规格

参数量、网络主干、控制频率、显存需求及 Hugging Face Hub 统计。

参数量
80M
Hub 下载量
74
出处Hugging Face
Hub 点赞
5
出处Hugging Face
网络架构
CogACT (VLM + DiT Action Module)
动作空间表示
连续关节动作块 (Action Chunking)
支持数据格式
SafeTensors

暂未公开或待收录:微调显存需求 · 闭环控制频率

快速部署与许可说明

开源许可证、权重拉取命令、预训练数据集与关联文章。

代码许可证

mit

权重许可证

mit

权重下载与策略推理参考

# 1. 从 Hugging Face Hub 下载模型权重与配置
huggingface-cli download CogACT/CogACT-Large --local-dir ./checkpoints/cogact-cogact-large

# 2. 使用 LeRobot / Transformers 加载策略开展真机或仿真闭环推理
python -m lerobot.scripts.eval --policy.path=CogACT/CogACT-Large

关联机型

模型卡或论文声明在这些机器人上训练、微调或部署过;口径是作者声明,不是第三方复现。

没有已核实的适配记录。

同家族模型

同一家族里的热门模型。

来源

本页事实对应的公开页面,以原文为准。

  1. Hugging Face CogACT/CogACT-Large访问 2026-10-21