跳到正文
Hugging Face Blog·· 26 天前AI 评分32

Hugging Face 推出 FairStress:评估 LLM 决策公平性的新基准

FairStress: A deeper evaluation of fairness in LLM decision-making

AI 导读

Hugging Face 发布 FairStress 基准,用于测量 LLM 在招聘、贷款、医疗等决策中超越最终选择的人口公平性。该基准含 300 个真实双候选人场景、覆盖 29 个领域,结合身份呈现方式与对抗性前缀扩展出超 1300 万个测试用例,并已集成进 Olmo-eval。测试发现相同说服性论据会因所支持人群不同而改变模型改判的难易程度。

来源:Hugging Face Blog · huggingface.co