跳到正文
InfoQ · 微信公众号·· 7 小时前AI 评分28

阿里巴巴孙鹏将在 QCon 上海分享 BoRP:用“探测式评测”重塑大模型评价体系

Read, Don't Write:重塑大模型评价体系,构建全自动、可进化的“探测式”评测管线|QCon 上海

阅读原文

本站未展示全文,请前往来源网站阅读。

AI 导读

阿里巴巴高级技术专家孙鹏将在 QCon 上海站分享“探测式评测”范式 BoRP(Bootstrapped Regression Probing),不再让模型写评语,而是直接读取隐状态中的满意度信号。该方案通过对比表示提取与 PLS 回归,将评测成本降低 97%,并在人类对齐度上超越传统生成式 Judge,已在万亿级流量 A/B 测试中落地。

来源:InfoQ · 微信公众号 · mp.weixin.qq.com