PACE:评估模型能否识别用户请求中的隐藏冲突
PACE: Towards Surfacing Hidden Conflicts in User Requests
阅读原文
本站未展示全文,请前往来源网站阅读。
AI 导读
研究者提出 PACE 数据集,用于评估模型能否识别以自我中心知识或事件形式存在的潜在约束,从而判断看似合理的用户请求是否不当。PACE 将基于明确人设的用户请求与自我中心 KB 事实配对,要求模型整合上下文证据判断请求是否冲突。同时提出多智能体框架 PaceMaker,通过查询改写、多跳图遍历和冲突感知过滤协调检索关键证据,在 PACE 上的证据检索质量和冲突决策准确率均持续优于现有方法。
来源:Hugging Face Daily Papers · arxiv.org