NBER：人与AI协作的收益受何影响

唧唧堂 · 公众号 · · 2025-01-22 20:31

正文

本期推荐一篇最新发表在NBER上的论文《谁从与人工智能合作中获益的ABC：能力、信念与校准》。随着人工智能（AI）技术的快速发展，AI工具正在越来越多地被应用于各种工作场景。尽管AI在许多任务中表现出了接近人类专家的能力，但它并非总能超过最优秀的人类个体，而是通过与人类协作，利用人类的情境理解能力和处理特殊情况的能力来实现更好的工作效率。然而，在人与AI协作中，个体的能力差异以及对自身能力的认知（即信念校准）可能对协作效果产生重要影响。本研究旨在探索人与AI协作的收益如何受到个体能力和信念校准的共同影响，尤其关注信念校准在这一过程中扮演的关键作用。信念校准是指个体对自身能力的准确认知程度，例如，当一个人报告其判断的准确率为90%时，他的实际正确率是否接近90%。

研究设计了一个随机控制实验，参与者被要求完成一个判断人物年龄的任务，即通过照片判断目标人物是否超过21岁。实验共招募732名参与者，这些参与者被随机分为控制组和实验组。控制组完全独立完成任务，而实验组在部分任务中获得AI的辅助。AI的预测以概率的形式呈现，代表其对目标人物年龄判断的信心值。任务的设计确保AI的表现优于平均水平的人类，但不及最优秀的人类参与者。实验不仅测量了参与者在无AI辅助下的基线能力，还通过记录参与者对自身判断的信心值与实际准确性的匹配程度，量化了信念校准水平。此外，通过比较实验组在AI辅助前后任务表现的变化，研究分析了AI对不同能力和信念校准个体的协作效果。

研究发现，AI协作总体上提升了参与者的任务表现，但其影响因个体能力和信念校准的不同而存在显著差异。低能力且信念校准较高的个体从AI协作中获益最大，而能力较高或信念校准不足的个体收益较小。进一步的分析表明，信念校准不足会限制AI协作的潜在益处。通过反事实分析，研究发现，如果能够消除信念校准误差，AI对缩小表现差距的作用将是现有水平的两倍。这一研究不仅揭示了信念校准对AI协作的重要性，还为未来在劳动市场中更有效地利用AI工具提供了实践指导。

论文原文：

NBER，Nov 2024

The ABC’s of Who Benefits from Working with AI: Ability, Beliefs, and Calibration

Andrew Caplin, David J. Deming, Shangwen Li，et al

唧唧堂学院推荐订阅

以下数据库、专栏及课程，安卓手机用户可通过下方小程序链接订阅，苹果手机用户请通过文末“阅读原文”链接访问唧唧堂学院H5页面订阅。

AI精析数据库