RoboTok:面向人类演示检索与灵巧操作学习的互联网级数据引擎
RoboTok: An Internet-Scale Data Engine for Human Demonstration Retrieval and Dexterous Manipulation Learning
阅读原文
本站未展示全文,请前往来源网站阅读。
AI 导读
RoboTok 是一个可扩展数据引擎,用查询人类操作视频从互联网视频中检索与操作相关的演示,用于训练灵巧机器人策略。它从 3D 手部轨迹学习潜在运动空间,可跨视角、场景外观和遮挡变化比较操作行为,并支持高效索引检索。真实机器人实验中,RoboTok 引导的策略相较最强基线平均成功率提升 42.2 个百分点。
来源:Hugging Face Daily Papers · arxiv.org