外观
模型CogACTCogACT-Small
模型档案汇总架构、许可、适配机型与资料来源
CogACT 在 Hugging Face 发布的机器人模型,架构为 CogACT (VLM + DiT Action Module)。
这个模型的核心架构、动作空间设计与真机部署定位。
CogACT-Small 是一个 Vision-Language-Action 模型,输入语言指令和单视角 RGB 图像,预测后续 16 个归一化机器人动作。动作由 7-DoF 末端执行器增量组成,包括 x、y、z、roll、pitch、yaw 和 gripper,面向机器人操控中的语言、图像到动作预测。
该模型采用组件化 VLA 架构,由 VLM 输出条件化专用动作模块,而不是简单将 VLM 通过动作量化直接改作动作预测。其视觉骨干为 DINOv2 ViT-L/14 和 SigLIP ViT-So400M/14,语言模型为 Llama-2,动作模型为 DiT-Small,预训练数据为 Open X-Embodiment 的一个子集。
预测动作需要依据数据集统计量进行反归一化,并可选使用 Adaptive Action Ensemble 进行整合。模型可在 Open-X 预训练混合中见过的机器人设置上零样本控制,也可用极少量演示针对新任务和机器人设置微调;代码和预训练权重采用 MIT 许可证。
参数量、网络主干、控制频率、显存需求及 Hugging Face Hub 统计。
暂未公开或待收录:微调显存需求 · 闭环控制频率
开源许可证、权重拉取命令、预训练数据集与关联文章。
代码许可证
mit
权重许可证
mit
# 1. 从 Hugging Face Hub 下载模型权重与配置
huggingface-cli download CogACT/CogACT-Small --local-dir ./checkpoints/cogact-cogact-small
# 2. 使用 LeRobot / Transformers 加载策略开展真机或仿真闭环推理
python -m lerobot.scripts.eval --policy.path=CogACT/CogACT-Small模型卡或论文声明在这些机器人上训练、微调或部署过;口径是作者声明,不是第三方复现。
没有已核实的适配记录。
同一家族里的热门模型。
本页事实对应的公开页面,以原文为准。