Amazon 与 AVERI 合作,用独立第三方评审强化 AI 安全评估
Strengthening AI safety evaluation through independent third-party review
阅读原文
本站未展示全文,请前往来源网站阅读。
AI 导读
Amazon 与独立非营利机构 AVERI 合作,对其内部安全评估数据集开展第三方独立评审,由 Miles Brundage 带队检查提示词的多样性、难度校准与方法严谨性。评审确认了主题覆盖全面、测试方式多样、污染风险低等优势,同时建议扩大多语言与文体覆盖、增加多步对抗性提示词、清理时效性引用并明确评分标准。Amazon 据此刷新测试集、引入分级难度框架、建立季度评审机制并扩展多语言提示词。
来源:Amazon Science · amazon.science