无证之罪

AI招人，比人类更容易产生偏见_我的网站

蒙面唱将猜猜猜

A | （来源：麻省理工科技评论）以后找工作时，你的简历很可能还没到招聘经理手里，就已经先被 AI 看过一遍了。 Renee 综合昨天开始南岛迎来狂风暴雨天气，气象部门警告称，随着未来几天的持续降雨，西海岸的暴雨可能升级为红色警报。

B | 问题是，它真的会公平吗？研究人员早就发现，大语言模型会从训练数据里继承人类社会已有的偏见。

C | 但一项最新研究发现，事情可能比这更复杂：AI 不仅会学习偏见，还会在不断做决策的过程中，自己形成新的刻板印象，而且这种倾向甚至比人类更强。

D | Advertise with us 从周二早上8点到周三早上8点，Westland地区的降雨量超过250毫米。更值得警惕的是，AI 公司如今都在努力打造拥有长期记忆的智能体，希望模型能够记住用户越来越多的细节。天气预报机构MetService预测周三该地区的强降雨会减少，随后周四的恶劣天气会延伸到其他地区。而这些记忆，也可能成为模型滋生偏见的土壤。为了研究这一问题，普林斯顿大学和芝加哥大学的研究人员设计了一场模拟招聘实验，参与者包括 ChatGPT、Claude、Gemini 等多个主流大语言模型。实验改编自一项经典心理学研究。预计到周四Westland的降雨量将达到700毫米。研究人员告诉模型，它们受雇于一位虚构城市的市长，担任招聘顾问，需要帮助政府为医生、律师、托育员、保洁员等 20 种职业招聘员工。所有候选人都来自四个虚构族群：Tufa、Aima、Reku 和 Weki。 MetService已经在全国范围内发布了数个天气警报和监测，覆盖了南岛大部分地区、北岛南部地区和北地。每一轮，模型都会面对一个新的岗位，以及四位分别来自不同族群的候选人。目前以下这些地区处于橙色暴雨警报下：Mount Taranaki, Tasman-Marlborough, Buller, Westland, Canterbury, Otago, Fiordland和Southland。目前Haast和Franz Josef之间的高速公路因滑坡而关闭。完成招聘后，它会立刻得到反馈：这个人是否胜任工作。随后进入下一轮。整个实验一共持续 40 轮，模型的目标只有一个：尽可能招到更多合适的人。模型不知道的是，研究人员其实做了一个手脚：无论来自哪个族群，每位候选人在任何岗位上的成功概率都完全一样。

E | 按理说，模型不应该偏向任何一个群体。西海岸应急管理部门表示，这是一次“重大暴雨事件”，周三上午升级为红色暴雨警报的可能性越来越大。该应急管理小组周二晚间说，“今晚整个Westland地区都会下雨，会导致一些地面洪水。但结果恰恰相反。仅仅经过几轮招聘，模型就开始根据有限的经验，把不同族群和不同职业绑定在一起。例如，如果模型早期碰巧遇到一位 Aima 族候选人担任医生失败，它之后便会越来越少招聘 Aima 人做医生，而是更倾向于把他们安排到保洁岗位。因为在模型看来，医生代表着更高的能力和亲和力，而保洁员对应的要求则更低。

F | 换句话说，它开始把一次偶然的经历，当成了整个群体的特征。暴雨将持续一夜，一直持续到明天(周三)的午间时间左右，然后在周四凌晨出现更多暴雨之前会有所缓解。

G | 我们整晚都在继续监测，预计水位将达到警报级别。更令人意外的是，这种倾向甚至比真人严重。研究人员使用了一项“职业隔离指数”来衡量刻板印象的程度。” MetService也警告称，Westland地区的暴雨可能在周三升级为红色警报。

H | 指数越高，说明不同族群越容易被固定到特定职业中；2 分代表完全隔离。

I | 此前心理学实验中的真人平均得分为 0.84，而大语言模型整体高出了约 65%。

J | Westland市长Helen Lash说，目前该地区“一切都好”，但官员们担心的是即将发生的情况。其中，OpenAI 的推理模型 o3 得到了 1.83，非常接近理论最高值。

K | 论文共同作者、普林斯顿大学博士生 Ryan Liu 认为，这其实并不奇怪。

L | Westland地区议会正在为Hokitika地区的居民提供至少500个沙袋，该地区被认为可能受到恶劣天气的最严重影响。“大语言模型本来就特别擅长根据有限的信息快速总结规律。当局正在密切关注天气的变化。北岛大部分地区要到周四才会迎来下雨天，包括奥克兰、惠灵顿、汉密尔顿在内的多地会有大风。”他说，“这几乎就是它们被训练出来要做的事情。” 在人类心理学中，这种现象对应着经典的“探索—利用困境”（exploration-exploitaion dilemma）：是继续选择过去证明有效的方法，还是尝试新的可能？就像出去吃饭时，你会纠结是去一家没吃过的新店，还是继续光顾那家不会踩雷的老餐馆。

M | 对于大语言模型来说，这种取舍往往更加偏向后者。狂风暴雨预计会持续到周五。奥克兰未来7天天气预报如下：全国地区天气警报情况可点击MetService官网查看。因为它们长期接受数学、编程和科学任务训练，而这些任务通常鼓励模型从少量例子中快速归纳规律，所以它们很容易过早下结论。也正因为如此，那些推理能力更强的新模型——例如 OpenAI 的 o3 和 DeepSeek 的 R1——在实验中反而表现出了更明显的偏见。

N | Liu 说，“当这种快速归纳的能力被带入社会场景时，问题就开始出现了。

o | 相关阅读：天降暴雨！南岛半瘫！注意避险！恶劣天气即将来临！暴雨“淹没”新西兰，你准备好了吗？注：本文为编译/原创，欢迎转发分享；但严禁复制等未经授权的非法使用。” 康奈尔大学计算机科学家 Angelina Wang 没有直接参与这项研究，但她认为，这项工作来得正是时候。

p | 如今，各家公司都在为聊天机器人加入长期记忆和个性化能力。当模型越来越依赖于用户过去的互动记录时，它也可能越来越容易根据这些有限经验形成判断。违反上述声明者，本网将追究其相关法律责任。

q | 使用授权请联系[email protected]。 chineseherald.co.nz All Rights Reserved 版权所有 (责编：twinkle) 来源 - 相关内容奥克兰一女子在Pak'nSave偷东西未遂后大喊大叫，员工被打脸新民调：最大赢家绿党，最大输家行动党，Luxon人气继续下滑天降暴雨！南岛半瘫！注意避险！疫情通报：过去一周新西兰新增3385例新西兰总理将访问东南亚三国恶劣天气即将来临！暴雨“淹没”新西兰，你准备好了吗？奥克兰市区旅馆大火：有人在楼外斗殴，三人拔刀相向奥克兰北岸绑架案：危险男子仍在社区流窜，公众请警惕！。她说，“它可能会过度依赖自己过去遇到过的行为模式。” 当然，解决办法并不是让 AI 什么都记不住。毕竟，大多数用户都希望聊天机器人能够记住自己说过的话。

r | 真正困难的是找到那个平衡点：既保留足够的记忆提供个性化体验，又不至于让模型因为这些经验形成新的偏见。研究人员还尝试了另一种办法，直接告诉模型：请公平一点。但并不奏效。Liu 认为，这说明模型未必真的能够把“公平”这样的价值观落实到具体决策中；又或者，这种要求会被另一个更强的目标覆盖——尽可能提高招聘成功率。但如果换一种方式，情况就不同了。研究人员告诉模型，如果能够实现更加多元化的招聘，它们还能获得额外奖励。

s | 模型的偏见随即大幅下降。

t | 这说明，与其不断强调公平，不如直接把公平写进模型的目标函数里，让社会价值真正成为模型优化的一部分。研究人员还发现，当模型掌握更多真正与任务相关的个人信息时，偏见也会减轻。另一组实验中，模型需要帮助来自不同族群的人搬迁到加拿大不同城市。如果提供的是年龄、教育背景等与适应新城市能力相关的信息，模型就更倾向于依据这些个人特征做判断，而不是简单按照族群分类。但如果提供的是发色、纹身图案这类无关信息，模型很快又会重新回到按族群做决定的老路上。至于现实中的 AI 招聘系统会不会出现同样的问题，目前还没有明确结论。实验中的模型每做完一次招聘，都能立刻知道结果；现实世界却不是这样。一家公司往往需要几个月甚至更长时间，才能判断一位员工是否真正适合岗位。不过，只要这些反馈持续积累，模型依然可能从有限的数据中过度总结经验，并把这些经验带到下一次招聘中。随着越来越多企业开始使用大语言模型筛选简历、甚至参与面试，这项研究释放出的信号不容忽视。未来，AI 不只是可能复制人类已有的偏见。