揭开多智能体决策的隐形不公，结果指标相同也未必可靠 | EMNLP'26

新智元报道 当多个大语言模型（LLM）组成「招聘委员会」，共同筛选简历、讨论候选人、打分并投票时，我们通常会用最终录用率来判断系统是否公平。 但一个更隐蔽的问题是： 即使不同群体的最终录用率看起来相近，他们在决策过程中经历的怀疑、追问、低分与额外审查，真的相同吗？ 近日，被 EMNLP 2026 Main Conference 接收的论文提出 SCOPED-Hiring ：一套面向LLM多智能体系统（MAS）的过程感知公平性诊断框架。 研究发现，看似平衡的最终结果背后，可能潜藏着显著的 轨迹不公平（Hidden Trajectory Unfairness） ：职业空窗会触发更多怀疑，代理线索会影响能力判断，身份线索则可能导致不均等的调查与审查。 更重要的是，SCOPED不止指出问题，还从决策轨迹中定位风险来源，并据此设计修复机制。在受控实验中，诊断驱动的修复方案将总分层公平负担降低 72.3% ，同时最终录用率仅变化 1.86个百分点 。 论文链接：https://arxiv.org/abs/2609.02092 开源代码与数据：https://github.com/Warren118/SCOPED 项目主页：https://scoped-hiring-project-page.vercel.app/ 当AI开始参与招聘、信贷、医疗筛查等高风险决策时，公平性已经不是「锦上添花」的附加指标，而是系统能否被信任和部署的基本前提。 但当前多数公平性审计仍然聚焦一个终点： 谁被录用了？谁被拒绝了？ 这种结果导向的视角当然重要，却可能遗漏决策真正发生的地方。一个候选人即使最终拿到了 offer，也可能在过程中经历了更多不必要的质疑；另一个候选人即使最终被拒绝，问题也可能早在第一轮评分、角色间讨论或调查分配时就已经出现。 面对 LLM多智能体系统，公平性不只存在于最终投票的一刻，也存在于模型如何阅读简历、如何形成判断、如何彼此说服，以及如何让某些候选人承受更多审查的完整轨迹中。 为此，研究团队提出了 SCOPED-Hiring 。它的核心主张很简单：公平审计不应只问「谁被录用」，还应追问「智能体是如何走到这个决定的」。 结果审计走向决策轨迹 传统审计像是在检查一场招聘的最终名单：不同群体的录用率是否相近？ SCOPED-Hiring则进一步打开多智能体决策的「黑箱」，追踪候选人信息如何从简历进入智能体的私有评估、公开论证、分数、投票与阶段流转。 研究团队构建了受控简历变体：在保持核心能力、工作经验和岗位匹配度不变的前提下，只改变特定候选人线索，例如职业空窗、教育背景、城市、社会经济代理线索与身份相关线索。随后，这些候选人进入由不同角色智能体组成的两阶段招聘委员会。 整个实验记录了超过 31.1万条结构化决策轨迹 。这使研究者不再只能看到「录用/拒绝」的结果，而能够观察到每一个中间环节中的差异性负担。 图1：SCOPED-Hiring的核心理念。即使结果层面的录用率看似平衡，决策过程、路径、动态与系统设计层面仍可能存在隐藏的公平 风险 。 技术内核 SCOPED-Hiring将多智能体决策中的公平风险组织为六个相互补充的诊断视角，构成从结果到过程的完整审计链条： 结果视角（S） ：最终录用率与评分是否存在差异？ 反事实视角（C） ：仅改变一个候选人线索时，决策是否随之改变？ 过程视角（O） ：不同候选人是否承受不同程度的负面表述、质疑或审查？ 路径视角（P） ：风险是否在初筛、复审、讨论等不同阶段累积或放大？ 动态视角（E） ：智能体之间的互动、辩论和投票变化是否带来新的不公平？ 设计视角（D） ：模型、记忆、拓扑结构与工作流等系统设计，会如何改变公平负担？ 这些视角共同组成了一个「公平性诊断矩阵」。它不只是给出一个总分，而是定位： 哪类候选人线索、在哪个决策环节、通过什么机制，触发了更高的公平 风险 。 图2：SCOPED-Hiring 的完整流水线。从受控候选人构建、多角色招聘委员会，到结构化轨迹记录、六视角诊断与修复验证。 实验洞察 研究团队在GPT、Gemini和Qwen三类 LLM 后端上进行实验。一个一致现象是：过程、路径、动态和系统设计层面的公平风险，明显强于只看最终录用结果时能够观察到的风险。 具体而言，三类模型中，过程感知O/P/E/D视角的平均诊断显著性分别是结果导向S/C视角的 4.52倍、4.66倍和2.74倍 。 换句话说， 最终录用率的「平静」，可能掩盖了决策轨迹中的波涛。 现象一：职业空窗会触发额外怀疑 职业空窗候选人未必会在最终录用率上立刻遭遇同等幅度的劣势，但他们在决策过程中更容易被当作「风险信号」对待。 以 GPT 招聘委员会为例：对于带有职业空窗线索的候选人，智能体在私有评估中提及空窗相关风险的比例达到 94% ；无空窗候选人则为 32% ，相差 62 个百分点 。这类差异随后还会进入带有怀疑色彩的调查请求与讨论之中。 这意味着，候选人可能最终仍获得相近的录用机会，却已经承受了更多解释、核查和质疑的负担。 现象二：代理线索会悄悄影响能力判断 教育层次、城市层级、生活方式等看似与岗位能力不直接相关的信息，可能被智能体转化为「资格」「潜力」或「文化匹配度」的判断依据。 例如，在大学层次这一代理线索上，不同层次候选人的最终录用率差距仅为 1--2 个百分点 ；但在三类模型中，Tier 1 候选人的综合评分仍比 Tier 3 候选人高 0.14--0.32 分 。 这一发现值得警惕：即使最终结果尚未拉开明显差距，代理线索也可能已经在中间评分环节不断积累，并影响后续讨论与投票。 现象三：身份线索改变了调查与审查的分配 身份相关线索呈现出更广泛的轨迹风险：在 GPT、Gemini 和 Qwen 上，身份相关信号的过程感知风险分别是结果导向风险的 2.44--3.01 倍 。 在保持其他候选人信息匹配的情况下，智能体可能对不同身份线索的候选人提出不同的调查请求，并形成不同强度、不同方向的怀疑性假设。问题不一定表现为某个群体被直接拒绝，而可能表现为： 不同候选人被置于不同强度的证据门槛之下。 这也揭示了多智能体决策中的一个关键风险：信息收集本身并非天然中立。谁更容易被追问、被核查、被要求解释，同样属于公平性的一部分。 图3：SCOPED的「公平 风险 地图」。不同信号家族在六类公平性视角下呈现出不同风险模式；在三类 LLM 后端中，过程感知风险普遍强于仅由最终结果能够观察到的风险。 这张热力图可以理解为多智能体招聘系统的「公平风险地图」：横向展示风险出现在哪一类决策环节；纵向定位哪些候选人线索更容易触发风险；颜色越深，则表示该位置的风险越突出。 最值得关注的是，右侧的汇总对比显示：在 GPT、Gemini 和 Qwen 三类模型中，隐藏在过程、路径、互动与系统设计中的风险，普遍比只看最终录用结果时更明显。 从发现问题，到修复问题：诊断驱动的Fair Skills 发现风险只是第一步。更关键的问题是：当我们知道不公平出现在哪个决策环节后，能否据此进行修复？ SCOPED-Hiring的答案不是给所有智能体追加一句笼统的「请保持公平」，而是把热力图中定位到的风险，转化为可在决策时触发