跳到正文
原文
Hugging Face Daily Papers·· 2 天前AI 评分37

AutoDataBench:面向加速自动研究的数据中心测试平台

AutoDataBench: A Data-centric Testbed for Accelerating Auto Research

AI 导读

AutoDataBench 是一个隔离数据因素、系统评估 LLM「数据智能」的受控测试平台,覆盖数据诊断、组织与构建三类优化任务,在固定非数据因素下考察前沿 LLM 通过迭代实验改进训练数据的能力。研究还对比训练前预测与实际结果,检验 LLM 是否具备数据效应推理能力,并发现复用 AutoDataBench 轨迹进行 mid-training 可提升下游编码性能。

来源:Hugging Face Daily Papers · arxiv.org