Amazon Science·· 26 天前AI 评分16
Amazon 与 AVERI 合作开展内部安全评估数据集独立第三方审查
Strengthening AI safety evaluation through independent third-party review
AI 导读
Amazon 与独立非营利机构 AVERI 合作,对其内部安全评估数据集进行第三方独立审查,由 Miles Brundage 带队检查提示词的多样性、难度校准与方法严谨性。审查确认了主题覆盖全面、测试方式多样、污染风险低等优势,同时提出扩大多语言覆盖、增加多步对抗性提示词、保持评估新鲜度等改进建议。Amazon 据此更新测试集、引入分级难度框架并建立季度审查机制。
来源:Amazon Science · amazon.science