Skip to content

MiniCPM-RobotTrack ​

MiniCPM-RobotTrack

openbmb 在 Hugging Face 发布的机器人模型,架构为 MiniCPMRobotTrackModel,参数规模 450M。

模型openbmbMiniCPM-RobotTrack

模型档案汇总架构、许可、适配机型与资料来源

MiniCPM-RobotTrack

openbmb 在 Hugging Face 发布的机器人模型,架构为 MiniCPMRobotTrackModel,参数规模 450M。

  • 具身模型
其他研究450M更新于 3 个月前

概述

这个模型的核心架构、动作空间设计与真机部署定位。

MiniCPM-RobotTrack 是一个面向具身目标跟踪的紧凑型 vision-language-action 策略模型,基于 MiniCPM4-0.5B 构建。它使用自然语言指令指定跟踪目标,结合融合后的 DINOv3 与 SigLIP 视觉特征,直接预测未来 8 个 [x, y, yaw] 路点,用于具身人物跟随。模型展示的应用场景包括室外避障跟踪、电梯跟踪和地下停车场跟踪。

其数据构建强调质量驱动的自演进流程:通过自动检查和人工审核移除异常轨迹、错误动作和无效交互,并以 DAgger 风格的模型-环境交互持续加入目标交叉、快速转弯、短时遮挡和多人交汇等困难样本。推理侧对视觉采集、输入编码、模型推理、动作生成、命令传输与执行进行联合优化,在 Unitree Go2 原生板载算力上可实现稳定 5+ FPS,端到端延迟约 180 ms。

使用示例基于 transformers 的 AutoTokenizer 和 AutoModel 加载 openbmb/MiniCPM-RobotTrack,并要求 transformers>=4.56;输入为文本指令、粗粒度历史视觉 token、当前帧细粒度视觉 token 及其时间索引,输出轨迹张量形状为 [1, 8, 3]。模型权重和代码以 Apache-2.0 许可证开源。

资料出处 Hugging Face openbmb/MiniCPM-RobotTrack

关键参数与架构规格

参数量、网络主干、控制频率、显存需求及 Hugging Face Hub 统计。

参数量
450M
Hub 下载量
279
出处Hugging Face
Hub 点赞
141
出处Hugging Face
网络架构
MiniCPMRobotTrackModel
动作空间表示
连续关节位置/末端位姿动作空间
支持数据格式
SafeTensors

暂未公开或待收录:微调显存需求 · 闭环控制频率

快速部署与许可说明

开源许可证、权重拉取命令、预训练数据集与关联文章。

代码许可证

apache-2.0

权重许可证

apache-2.0

权重下载与策略推理参考

# 1. 从 Hugging Face Hub 下载模型权重与配置
huggingface-cli download openbmb/MiniCPM-RobotTrack --local-dir ./checkpoints/openbmb-minicpm-robottrack

# 2. 使用 LeRobot / Transformers 加载策略开展真机或仿真闭环推理
python -m lerobot.scripts.eval --policy.path=openbmb/MiniCPM-RobotTrack

关联机型

模型卡或论文声明在这些机器人上训练、微调或部署过;口径是作者声明,不是第三方复现。

没有已核实的适配记录。

同家族模型

同一家族里的热门模型。

来源

本页事实对应的公开页面,以原文为准。

  1. Hugging Face openbmb/MiniCPM-RobotTrack访问 2026-10-21