外观
AnyThermal
theairlabcmu 在 Hugging Face 发布的机器人模型,架构为 Dinov2Model,参数规模 87M,训练数据包含 theairlabcmu/TartanRGBT。
模型theairlabcmuAnyThermal
模型档案汇总架构、许可、适配机型与资料来源
theairlabcmu 在 Hugging Face 发布的机器人模型,架构为 Dinov2Model,参数规模 87M,训练数据包含 theairlabcmu/TartanRGBT。
这个模型的核心架构、动作空间设计与真机部署定位。
AnyThermal 是一个任务无关的热成像特征提取 backbone,面向多环境和机器人感知任务,目标是在不针对具体任务微调的情况下提供可迁移的热图像表示。它以 DINOv2 ViT-B/14 为基础,规模 86.6M 参数,输入为转换成 3 通道的热图像,输出每个 patch 及 CLS token 的 768 维特征。
训练采用 RGB DINOv2 冻结教师与可训练热成像学生的知识蒸馏框架,学生以 RGB 权重初始化,并在 RGB-thermal 配对数据上用 CLS token 特征的对比损失进行跨模态对齐。训练数据来自 VIVID++、STheReO、Freiburg、TartanRGBT 和 Boson Nighttime Dataset,覆盖城市、航拍、室内和越野环境;其中 TartanRGBT 使用硬件同步的 RGB-Thermal 双目采集平台。
模型已在热查询到 RGB 数据库的跨模态地点识别、热语义分割、单目热成像深度估计三个任务上进行基准测试,backbone 权重未做任务特定微调。限制包括需要 3 通道热图像输入,以及在训练数据代表性不足的环境中性能可能变化;许可证为 BSD-3-Clause-Clear License。
参数量、网络主干、控制频率、显存需求及 Hugging Face Hub 统计。
暂未公开或待收录:微调显存需求 · 闭环控制频率
开源许可证、权重拉取命令、预训练数据集与关联文章。
代码许可证
bsd-3-clause-clear
权重许可证
bsd-3-clause-clear
# 1. 从 Hugging Face Hub 下载模型权重与配置
huggingface-cli download theairlabcmu/AnyThermal --local-dir ./checkpoints/theairlabcmu-anythermal
# 2. 使用 LeRobot / Transformers 加载策略开展真机或仿真闭环推理
python -m lerobot.scripts.eval --policy.path=theairlabcmu/AnyThermal预训练与微调基准数据集:theairlabcmu/TartanRGBT、xjh19972/boson-nighttime
模型卡或论文声明在这些机器人上训练、微调或部署过;口径是作者声明,不是第三方复现。
没有已核实的适配记录。
同一家族里的热门模型。
本页事实对应的公开页面,以原文为准。