首页 › 目标与指标 › 古德哈特定律
目标与指标 · 指标陷阱

古德哈特定律

你奖励什么,就会得到什么,只是常常不是你想要的那个。

Goodhart's Law◷ 约 3 分钟▤ 12 个真实故事换成 AI 也一样在知识地图里看它和谁相连 →

玩这一课(2 分钟)

一户人家,需要在同一家银行办几个产品?2010 年,富国银行的首席执行官给出了一个精确的答案:八个。当时他的客户平均每户 5.70 个,他要的是八个。

为什么是八,不是七,也不是十?他在那年的年报里写给股东:「常有人问我,为什么交叉销售的目标定成八。答案是,它和 great 押韵。」英文里,eight 和 great 是一个韵。

六年后,联邦监管机构公布了这个目标换来的东西。据银行自己统计,员工开了大约 150 万个存款账户,申请了大约 56.5 万张信用卡,客户可能都没有同意过。有的员工编造电子邮箱,替客户开通网银;有的给客户从没要过的借记卡设好了密码。

银行内部给这一切起了个名字,叫「gaming」,刷数。

窗户和窗上的画

你奖励什么,就会得到什么,只是常常不是你想要的那个。

数字像一扇窗。你没法看着每个柜员接待每个客户,只好透过窗户看:每户几个产品。数字在涨,说明客户越来越信任这家银行。本来是这么想的。

现在,按窗外的风景发奖金。一夜之间,让窗户好看有了两条路:一条是去打理窗外的花园,慢,也难;另一条是在玻璃上画一座花园,快得多。这不需要谁是坏人,压力会自己往省力的那边流。经济学家管这叫古德哈特定律,得名于英国经济学家查尔斯·古德哈特,他在 1975 年描述了这个现象。

富国银行窗上的画,画得越来越细。美国司法部后来披露,员工伪造客户签名开户;把钱从客户真正的账户挪进新账户,让新账户看起来有人在用,内部管这叫「模拟入金」。有的员工改掉客户的联系方式,让银行自己的满意度回访找不到人。

连用来发现问题的那把尺子,也被刷了。

而且这不是秘密。据司法部的说法,2004 年就有内部调查员把这事叫作「越来越严重的瘟疫」,第二年又有人说它「正在失控」。销售模式照旧。2020 年,富国银行同意支付 30 亿美元,了结刑事和民事调查。

这些都是人干的:顶着压力,背着指标,盯着奖金。把人拿掉,问题是不是也就跟着没了?

一艘不冲线的船

2016 年,OpenAI 的研究员训练一个 AI 玩赛艇游戏 CoastRunners。游戏按撞到赛道上的目标给分。研究员的想法很自然:分数高,比赛也就跑得好。

AI 找到了一个小水湾,里面有三个目标会不断重新出现。它就在那儿一圈一圈地转,掐着时间,目标一冒出来就撞上去。船着了火,撞上别的船,还开错了方向,比赛没跑完。

它的平均得分,比人类玩家高 20%。

训练里没有哪一条写着「赢下比赛」。研究员写下的是「撞到目标得分」,它学会的就是攒分。没有压力,没有奖金,也没有谁偷懒。只有一个目标和一个衡量,两者并不完全重合,而一个学习者找到了它们分开的地方。

九年后,OpenAI 在自己最出名的产品上又碰到了这道缝。2025 年 4 月,它撤回了 ChatGPT 的一次更新,用公司自己的话说,那一版变得「过度奉承、过度顺从」;公司说,这次更新太看重点赞、点踩这类短期反馈。补救办法里有一条:更重地看长期的用户满意度。

好看极了的看板

假设你管着一个客服组。上个季度起,你开始按每小时关单数考核大家。如今看板好看极了:关单数涨了,人人达标。

可有个客户的名字有点眼熟。你一搜,三周里四张工单,说的都是同一张出错的发票,每张都在几分钟内用一段客气的模板回复关掉了。客户一次次回信,每次回信都开出一张新工单,每张新工单又被算了一次。

你在看板上加了第二列:重开的工单,以及同一个客户一周内又来找的工单。放在它旁边,第一列的数字就不像好消息了。

然后是慢的那一步。你随手调出二十张已关闭的工单,一张一张读下去,就像那位客户读到的那样。

先看几件事

富国银行 · 2002–2016八个才算好目标是每户几个产品,于是员工生产出了产品,没生产出更满意的客户。看整件事 →OpenAI · 2016从没跑完的冠军分数本来是用来看谁赛得好的。AI 一去追分数,就不再比赛了。看整件事 →亚特兰大公立学区 · 2001–2015坐到场地上去州统考本来是看孩子学会了多少。等到饭碗系在它上面,82 名教育工作者承认参与改过它的结果。看整件事 →达美乐比萨(Domino's Pizza) · 1984–1994十八分钟,绰绰有余30 分钟本来只是「服务好」的一个替身。可一旦这个数字上挂了 3 美元,批评者就说它在催司机抢时间;达美乐自己也承认,不管怎么培训司机,都甩不掉公众的这个看法。看整件事 →荷兰税务与海关管理局(Belastingdienst) · 2013–2021齿轮里的沙子多出来的核查拿到 2500 万欧元,这笔钱每年都得靠少发错的补贴挣回来。直到 2019 年,管理层都盯着这个数,而少一个签名就可能让一个家庭退回全年补贴。看整件事 →Facebook(马克·扎克伯格) · 2018-2021一条评论三十分新指标是用点赞、评论和转发拼出来的。Facebook 自己的研究员发现,媒体和政党都在往愤怒的方向挪,因为这能招来大量评论和回应。看整件事 →OpenAI · 2025一个赞OpenAI 说点赞点踩这个信号常常有用,被点踩通常说明哪里出了错。可一旦拿来当训练奖励,它有时可能偏向那些只是顺着用户说的回答。看整件事 →微软(Microsoft) · 2000–2013两个优秀,七个平庸,一个垫底排名本来是为了奖励好工作,可大家也学会了别的提分办法:去讨好别的团队的经理;按一位工程师自己的说法,还要对同事留一手信息,让他们追不上自己。看整件事 →中斯塔福德郡 NHS 基金信托(斯塔福德医院) · 2005–2013最后十分钟四小时急诊目标本想消灭漫长的等待。在斯塔福德,检查人员发现时限前最后十分钟有一波集中转送,医生说曾被要求放下病情更重的病人,先去打发小病小伤。看整件事 →Palisade Research · 2025引擎认输了对局程序把引擎认输算作胜利,于是有的智能体直奔「让它认输」而去。看整件事 →本森(Alan Benson)、丹妮尔·李(Danielle Li)、凯莉·薛(Kelly Shue),131 家美国公司的销售数据 · 2005–2011,2019 年发表卖得最好的人当了经理作者提醒,公司要是直接奖励协作,销售们可能给单子凭空添上合作者。看整件事 →西尔斯汽修中心(Sears Auto Centers) · 1990–1992每班要修几单州政府指控,员工每个班都有要卖出的维修单数。州政府说,卖维修一成了指标,用不着修的车也被修了。看整件事 →

玩一玩

出处

  1. Wells Fargo & Company, 2010 Annual Report(CEO John Stumpf 致股东信)
  2. 美国消费者金融保护局(CFPB):对富国银行罚款 1 亿美元,2016 年 9 月 8 日
  3. 美国司法部:富国银行同意支付 30 亿美元了结销售行为的刑事和民事调查,2020 年 2 月 21 日
  4. Jack Clark、Dario Amodei,Faulty Reward Functions in the Wild,OpenAI,2016 年 12 月 21 日
  5. OpenAI,Sycophancy in GPT-4o,2025 年 4 月 29 日
  6. Mattson、Bushardt、Artino,"When a Measure Becomes a Target, It Ceases to be a Good Measure",Journal of Graduate Medical Education,2021
  7. Charles Goodhart,Problems of Monetary Management:The U.K. Experience,收于 Papers in Monetary Economics,澳大利亚储备银行,1975
  8. Jack Clark and Dario Amodei (OpenAI), Faulty Reward Functions in the Wild, 2016
  9. Sydney Von Arx, Lawrence Chan and Beth Barnes (METR), Recent Frontier Models Are Reward Hacking, 2025
  10. 佐治亚州州长特别调查组(Wilson、Bowers、Hyde),亚特兰大学区考试舞弊特别调查报告,第 1 卷,2011
  11. 佐治亚州州长特别调查组,亚特兰大学区考试舞弊特别调查报告,第 3 卷,2011
  12. NPR,Governor's Report Details Widespread, Organized Cheating In Atlanta Schools,2011 年 7 月 6 日
  13. Rachel Aviv,Wrong Answer,《纽约客》,2014 年 7 月 14 日
  14. NPR,Verdict Reached In Atlanta School Cheating Case,2015 年 4 月 1 日
  15. 《基督教科学箴言报》,Atlanta educators convicted of racketeering in test cheating scandal,2015 年 4 月 1 日
  16. Washington Post (from news services), Pizza Policy Challenged, June 14, 1989
  17. Washington Post (UPI), Domino's Pizza to Stress Safety Over Speed, July 25, 1989
  18. Los Angeles Times, reprinted in the Roanoke Times, 30-Minute Pizza Pledge Abandoned, December 22, 1993
  19. UPI, Domino's Pizza ends 30-minute delivery guarantee, December 21, 1993
  20. Washington Post, $79 Million Jury Award Puts Brakes on Domino's 30-Minute Delivery Pledge, December 22, 1993
  21. UPI, Domino's settles suit for 'far less', April 5, 1994
  22. Tweede Kamer, Parlementaire ondervragingscommissie Kinderopvangtoeslag, Verslag Ongekend onrecht, December 17, 2020
  23. Tweede Kamer, Brief van de staatssecretaris van Financiën over het boetebesluit van de Autoriteit Persoonsgegevens, Kamerstuk 31 066 nr. 936, December 7, 2021
  24. Amnesty International, Xenophobic Machines, Discrimination through unregulated use of algorithms in the Dutch childcare benefits scandal, EUR 35/4686/2021, October 2021
  25. The Guardian, Dutch government resigns over child benefits scandal, January 15, 2021
  26. 马克·扎克伯格 Facebook 帖子,2018 年 1 月 11 日(存档)
  27. Facebook,Facebook Reports Fourth Quarter and Full Year 2017 Results,2018 年 1 月 31 日
  28. Facebook 2017 年第四季度财报电话会文字稿,2018 年 1 月 31 日(The Motley Fool)
  29. Keach Hagey、Jeff Horwitz,Facebook Tried to Make Its Platform a Healthier Place. It Got Angrier Instead.,《华尔街日报》,2021 年 9 月 15 日(收入美国众议院能源和商业委员会 2021 年 12 月 1 日听证会记录)
  30. OpenAI, Sycophancy in GPT-4o: What happened and what we're doing about it, April 29, 2025
  31. OpenAI, Expanding on what we missed with sycophancy, May 2, 2025
  32. BBC News, Update that made ChatGPT 'dangerously' sycophantic pulled, April 30, 2025
  33. NBC News, OpenAI rolled back a ChatGPT update that made the bot excessively flattering, April 30, 2025
  34. Kurt Eichenwald, Microsoft's Lost Decade, Vanity Fair, August 2012
  35. Bloomberg, Microsoft Eliminates Curved Grading for Employee Reviews, November 13, 2013
  36. Bloomberg, Microsoft Kills Its Hated Stack Rankings. Does Anyone Do Employee Reviews Right?, November 13, 2013
  37. NBC News (Todd Bishop, GeekWire), Microsoft overhauls controversial employee review system, November 12, 2013
  38. GeekWire, Microsoft axes 'stack ranking' in massive overhaul of employee review process (full text of Lisa Brummel's memo), November 12, 2013
  39. Report of the Mid Staffordshire NHS Foundation Trust Public Inquiry, Executive summary (Robert Francis QC), HC 947, February 2013
  40. Healthcare Commission, Investigation into Mid Staffordshire NHS Foundation Trust, March 2009
  41. BBC News, Stafford Hospital, Hiding mistakes 'should be criminal offence', February 6, 2013
  42. BBC News, Failing hospital 'caused deaths', March 17, 2009
  43. Alexander Bondarenko, Denis Volk, Dmitrii Volkov, Jeffrey Ladish, Demonstrating specification gaming in reasoning models, arXiv 2502.13295 (v3), August 2025
  44. Alan Benson, Danielle Li, Kelly Shue, Promotions and the Peter Principle, Quarterly Journal of Economics 134(4), 2019(MIT 开放获取版)
  45. Why Is Your Boss Bad At His Job? It May Be The 'Peter Principle' At Work, NPR, 2018-04-03(文字稿)
  46. Tampa Bay Times, Sears accused of auto repair fraud, June 12, 1992
  47. Los Angeles Times via The Seattle Times, Companies rethink sales incentives after Sears case, July 19, 1992
  48. Bloomberg, Sears Gets Handed a Huge Repair Bill, September 14, 1992