跳到正文
Hugging Face Daily Papers·· 1 天前AI 评分39

RoboValue:面向机器人价值模型统一评估的细粒度仿真与真实基准

RoboValue: A Fine-Grained Sim-and-Real Benchmark for Unified Evaluation of Robotic Value Models

阅读原文

本站未展示全文,请前往来源网站阅读。

AI 导读

RoboValue 是一个细粒度仿真与真实基准,通过共享接口从任务状态理解、时序进度监控、失败与恢复推理、价值一致性四个维度统一评估机器人价值模型。其数据集覆盖 15 个仿真和 20 个真实世界操作任务,在零样本和单样本设置下测试代表性模型,发现即便结果与前进进度得分较强的模型也存在指令细粒度 grounding、依赖历史的进度跟踪和恢复评估错误。

来源:Hugging Face Daily Papers · arxiv.org