跳到正文
热点事件历史事件

Ai2发布FairStress公平性基准

1 篇报道1 个报道来源10 天前更新

先了解这件事

AI 综述

Ai2 发布 FairStress 基准,用于衡量大语言模型在招聘、贷款、医疗等影响个人决策中的群体公平性,覆盖 Olmo、Llama、Qwen、Gemma、Claude 和 GPT 系列模型。基准可下载,并已接入 Ai2 的模型评测工作台 Olmo-eval。 除完整基准外,Ai2 还推出 FairStress-Core:一个按项目反应理论筛选出的 5 万条子集。Ai2 称,其激活分析仅涉及两个模型和少量人口群体对比,因此这部分结论比整体行为结果的范围更窄。

AI 根据报道生成 · 10 天前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月21日
  1. Hugging Face Blog
    Hugging Face 推出 FairStress:评估 LLM 决策公平性的新基准

    Hugging Face 发布 FairStress 基准,用于衡量 LLM 在招聘、贷款、医疗等决策中的群体公平性,覆盖 Olmo、Llama、Qwen、Gemma、Claude 和 GPT 系列模型。