MMLU-Pro、MMMU 背后：华人学者陈文虎如何为 AI 出题
AI成绩单背后，藏着一位华人“出题人”
阅读原文
本站未展示全文，请前往来源网站阅读。
AI 导读
滑铁卢大学助理教授陈文虎是 MMLU-Pro、MMMU 和 MMMU-Pro 等主流 AI 基准评测的幕后出题人。他 2024 年推出的 MMLU-Pro 含 12032 道题、覆盖 14 个领域，选项从 4 个扩展到 10 个，使模型准确率较原版 MMLU 下降 16% 到 33%。他现已加入 Meta 超级智能实验室，继续从事多模态预训练数据与评估工作。
来源：硅星人Pro · 微信公众号 · mp.weixin.qq.com