外观
模型CogACTCogACT-Large
模型档案汇总架构、许可、适配机型与资料来源
CogACT 在 Hugging Face 发布的机器人模型,架构为 CogACT (VLM + DiT Action Module)。
这个模型的核心架构、动作空间设计与真机部署定位。
CogACT-Large 是一个 Vision-Language-Action 模型,输入语言指令和单视角 RGB 图像,用于预测机器人动作。它面向“语言、图像到机器人动作”的场景,一次输出接下来 16 个归一化机器人动作,动作形式为 7-DoF 末端执行器增量:x、y、z、roll、pitch、yaw 和 gripper。
该模型采用组件化 VLA 架构,不是简单将 VLM 通过动作量化改作动作预测,而是在 VLM 输出条件下使用专门的动作模块。其视觉骨干包括 DINOv2 ViT-L/14 和 SigLIP ViT-So400M/14,语言模型为 Llama-2,动作模型为 DiT-Large;预训练数据来自 Open X-Embodiment 的一个子集。
CogACT 可在 Open-X 预训练混合中出现过的机器人设置上进行 zero-shot 控制,也可用少量演示针对新任务和新机器人设置微调。输出动作需要依据数据集统计进行反归一化,并可选择通过 Adaptive Action Ensemble 集成。代码和预训练权重采用 MIT 许可证。
参数量、网络主干、控制频率、显存需求及 Hugging Face Hub 统计。
暂未公开或待收录:微调显存需求 · 闭环控制频率
开源许可证、权重拉取命令、预训练数据集与关联文章。
代码许可证
mit
权重许可证
mit
# 1. 从 Hugging Face Hub 下载模型权重与配置
huggingface-cli download CogACT/CogACT-Large --local-dir ./checkpoints/cogact-cogact-large
# 2. 使用 LeRobot / Transformers 加载策略开展真机或仿真闭环推理
python -m lerobot.scripts.eval --policy.path=CogACT/CogACT-Large模型卡或论文声明在这些机器人上训练、微调或部署过;口径是作者声明,不是第三方复现。
没有已核实的适配记录。
同一家族里的热门模型。
本页事实对应的公开页面,以原文为准。