他们做了个靠谱的方法(两阶段贝叶斯 IRT ),把“你一个人解题”和“你+AI 一起做事”之间的真实差距给量化了,然后得出结论
人与人之间使用 AI 增效程度的最显著差距,在于一个人的“心智理论”能力,也即“推断他人心智状态(意图、信念、知识)/读懂对方意图与信息状态”的能力
Keypoint:
- 再次证明(或者有力证明?)一个“显而易见”的结论,人的“独立解题能力”和“与 AI 协作能力”是两套完全不同的能力。高水平解题能力的人可能用不好 ai 或者效果提升不大,低水平解题能力的人却可能如虎添翼
- “心智理论”(也即你能不能读懂对方意图、上下文、潜台词)是决定协作效果的关键。它不提升你单挑的能力,但显著提升你和 AI 的组队效果
- 题越难,协作提升越大。难题是“人机互补”的最佳舞台
- 但是普遍来看,高能力的人和 AI 搭档时依然更强;但低能力的人从协作里拿到的“绝对提升”更大,可以部分拉平差距
论文搜索《 Quantifying Human-AI Synergy 》
评论:所以如果有些人仍然觉得这年头的 AI 能力不行、不值得“协作”的话,不妨评估一下自己的“心智理论能力”,或者干脆看看工作中其他同事对自己的合作能力是如何评价的