简历内容不变,只换姓名与本科院校,招聘助手的拒信草稿率翻倍。哪些对照和切片能证明问题出在输出偏见,并排除「本周招人标准被改过」这种解释?
题目
简历内容不变,只换姓名与本科院校,招聘助手的拒信草稿率翻倍。哪些对照和切片能证明问题出在输出偏见,并排除「本周招人标准被改过」这种解释?
参考答案
点击展开参考答案
- 用成对反事实:固定岗位描述、年限、项目和成绩,只替换姓名、代词或院校,看拒信率、套话和薪资暗示有没有系统性差。
- 岗位要求是否改了,用“同一属性、不同周次”且冻结 JD 文本的对照就能拆开。
- 评估要报群体切片和交叉切片,并且同时看决策和语气,而不是只扫敏感词。
- 实验:准备 30–80 份模板简历 × 若干属性替换,得到成对或成组输出;同一提示、同一模型版本、同一温度下跑,统计拒信、进入面试、要求补材料、出现“文化匹配 / 名校光环”等主观评语的比例。
- 检验用配对方法处理二值决策,不要把 160 份替换简历当成独立样本去报一个总准确率。