具身开发者社区

外观

踩坑GitHub openvla/openvla4 个月前

OpenVLA Libero-object评测成功率仅69%远低于报告值88.4% ​

使用官方权重评测Libero-object成功率仅约69%，社区确认复现该问题，建议参考LIBERO库Issue #88进行修复。

AI 整理
  • 仿真与训练
  • 具身模型

本文由 AI 根据公开内容整理，可能有误，请以原文为准：Low success rate on Libero-object（GitHub openvla/openvla #335）

状态：有绕过办法

问题 ​

直接使用 openvla/openvla-7b-finetuned-libero-object 开源权重在 Libero-object 数据集上评测，更换随机种子7和21后成功率均仅为69.4%左右，比论文报告的88.4%低19%。其他三个Libero子集评测结果正常，偏差小于3%。社区用户独立运行脚本复现了69.8%的低成功率，怀疑权重文件或评测环境存在异常。

环境 ​

模型：openvla-7b-finetuned-libero-object；数据集：Libero-object；框架：OpenVLA、LIBERO

解决办法 ​

  1. 访问 LIBERO 官方仓库 Issue #88（https://github.com/Lifelong-Robot-Learning/LIBERO/issues/88）获取针对 Libero-object 评测成功率异常的修复方案或环境配置补丁。
  2. 鉴于其他 Libero 子集评测正常，重点排查 Libero-object 特定的任务定义、资产加载路径或评估指标计算逻辑是否与 OpenVLA 推理代码对齐。
  3. 应用 Issue #88 中的修正后重新运行评测脚本，验证成功率是否恢复至 88% 左右的预期水平。

讨论原作者：@HIT-DLX 等，版权归原作者所有。

来源

本页事实对应的公开页面，以原文为准。

  1. GitHub openvla/openvla #335：Low success rate on Libero-object访问 2026-10-26