RoboValue:面向机器人价值模型统一评估的细粒度仿真与真实基准
RoboValue: A Fine-Grained Sim-and-Real Benchmark for Unified Evaluation of Robotic Value Models
阅读原文
本站未展示全文,请前往来源网站阅读。
AI 导读
RoboValue 是一个细粒度仿真与真实基准,通过共享接口从任务状态理解、时序进度监控、失败与恢复推理、价值一致性四个维度统一评估机器人价值模型。其数据集覆盖 15 个仿真和 20 个真实世界操作任务,在零样本和单样本设置下测试代表性模型,发现即便结果与前进进度得分较强的模型也存在指令细粒度 grounding、依赖历史的进度跟踪和恢复评估错误。
来源:Hugging Face Daily Papers · arxiv.org