702。

我们希望机器是完美的，如果机器不完美，那就丢弃它：M. T. Dzidolet, L. G. Pierce, H.P. Beck, L. A. Dawe, “The Perceived Utility of Huma ad Automated Aids i a Visual Detectio Task,” Huma Factors: The Joural of the Huma Factors ad Ergoomics Society 44, o. 1（2002）: 79–94; K. A. Hoff, M. Bashir, “Trust i Automatio: Itegratig Empirical Evidece o Factors That Ifluece Trust,” Huma Factors: The Joural of the Huma Factors ad Ergoomics Society 57, o. 3（2015）: 407–434; P. Madhava, D. A. Wiegma, “Similarities ad Differeces Betwee Huma–Huma ad Huma–Automatio Trust: A Itegrative Review,” Theoretical Issues i Ergoomics Sciece 8, o. 4（2007）: 277–301。

第11章　哪里有预测，哪里就有客观无知

有关管理决策的研究：E. Dae, M. G. Pratt, “Explorig Ituitio ad Its Role i Maagerial Decisio Makig,” Academy of Maagemet Review 32, o. 1（2007）: 33–54; Cila Akici, Eugee Sadler-Smith, “Ituitio i Maagemet Research: A Historical Review,” Iteratioal Joural of Maagemet Reviews 14（2012）: 104–122; Gerard P. Hodgkiso et al., “Ituitio i Orgaizatios: Implicatios for Strategic Maagemet,” Log Rage Plaig 42（2009）: 277–297。

管理决策中的直觉的综述性文章，将直觉定义为对给定行动方案的一702。

我们希望机器是完美的，如果机器不完美，那就丢弃它：M. T. Dzidolet, L. G. Pierce, H.P. Beck, L. A. Dawe, “The Perceived Utility of Huma ad Automated Aids i a Visual Detectio Task,” Huma Factors: The Joural of the Huma Factors ad Ergoomics Society 44, o. 1（2002）: 79–94; K. A. Hoff, M. Bashir, “Trust i Automatio: Itegratig Empirical Evidece o Factors That Ifluece Trust,” Huma Factors: The Joural of the Huma Factors ad Ergoomics Society 57, o. 3（2015）: 407–434; P. Madhava, D. A. Wiegma, “Similarities ad Differeces Betwee Huma–Huma ad Huma–Automatio Trust: A Itegrative Review,” Theoretical Issues i Ergoomics Sciece 8, o. 4（2007）: 277–301。

第11章　哪里有预测，哪里就有客观无知

有关管理决策的研究：E. Dae, M. G. Pratt, “Explorig Ituitio ad Its Role i Maagerial Decisio Makig,” Academy of Maagemet Review 32, o. 1（2007）: 33–54; Cila Akici, Eugee Sadler-Smith, “Ituitio i Maagemet Research: A Historical Review,” Iteratioal Joural of Maagemet Reviews 14（2012）: 104–122; Gerard P. Hodgkiso et al., “Ituitio i Orgaizatios: Implicatios for Strategic Maagemet,” Log Rage Plaig 42（2009）: 277–297。

管理决策中的直觉的综述性文章，将直觉定义为对给定行动方案的一种判断：Hodgkiso et al., “Ituitio i Orgaizatios,” 279。

近期一篇有关人才选拔的报告：Natha Kucel et al., “Mechaical Versus Cliical Data Combiatio i Selectio ad Admissios Decisios: A Meta-Aalysis,” Joural of Applied Psychology 98, o. 6（2013）: 1060–1072。有关个人决策的更多内容，参见第24章。

过分自信是已经被大量研究证明了的一种认知偏差：Do A. Moore, Perfectly Cofidet: How to Calibrate Your Decisios Wisely（New York: HarperCollis, 2020）。

对政治和经济趋势发表评论或提供建议：Philip E. Tetlock, Expert Political Judgmet: How Good Is It? How Ca We Kow?（Priceto, NJ: Priceto Uiversity Press, 2005）, 239, 233。

对136项研究进行了回顾：William M. Grove et al., “Cliical Versus Mechaical Predictio: A Meta-Aalysis,” Psychological Assessmet 12, o. 1（2000）: 19–30。

由塞德希尔·穆来纳森和齐亚德·欧博迈亚完成的另一项研究对心脏病诊断进行了建模：Sedhil Mullaiatha, Ziad Obermeyer, “Who Is Tested for Heart Attack ad Who Should Be: Predictig Patiet Risk ad Physicia Error,” 2019. NBER Workig Paper 26168, Natioal Bureau of Ecoomic Research。

在充满无知的情况下，否认无知就显得更加诱人：Westo Agor, “The Logic of Ituitio: How Top Executives Make Importat 种判断：Hodgkiso et al., “Ituitio i Orgaizatios,” 279。

近期一篇有关人才选拔的报告：Natha Kucel et al., “Mechaical Versus Cliical Data Combiatio i Selectio ad Admissios Decisios: A Meta-Aalysis,” Joural of Applied Psychology 98, o. 6（2013）: 1060–1072。有关个人决策的更多内容，参见第24章。

过分自信是已经被大量研究证明了的一种认知偏差：Do A. Moore, Perfectly Cofidet: How to Calibrate Your Decisios Wisely（New York: HarperCollis, 2020）。

对政治和经济趋势发表评论或提供建议：Philip E. Tetlock, Expert Political Judgmet: How Good Is It? How Ca We Kow?（Priceto, NJ: Priceto Uiversity Press, 2005）, 239, 233。

对136项研究进行了回顾：William M. Grove et al., “Cliical Versus Mechaical Predictio: A Meta-Aalysis,” Psychological Assessmet 12, o. 1（2000）: 19–30。

由塞德希尔·穆来纳森和齐亚德·欧博迈亚完成的另一项研究对心脏病诊断进行了建模：Sedhil Mullaiatha, Ziad Obermeyer, “Who Is Tested for Heart Attack ad Who Should Be: Predictig Patiet Risk ad Physicia Error,” 2019. NBER Workig Paper 26168, Natioal Bureau of Ecoomic Research。

在充满无知的情况下，否认无知就显得更加诱人：Westo Agor, “The Logic of Ituitio: How Top Executives Make Importat Decisios,” Orgaizatioal Dyamics 14, o. 3（1986）: 5–18; Lisa A. Burke, Moica K. Miller, “Takig the Mystery Out of Ituitive Decisio Makig,” Academy of Maagemet Perspectives 13, o. 4（1999）: 91–99。

当算法能够获得更高的准确性时，人们会更愿意相信算法：Poorima Madhava, Douglas A. Wiegma, “Effects of Iformatio Source, Pedigree, ad Reliability o Operator Iteractio with Decisio Support Systems,” Huma Factors: The Joural of the Huma Factors ad Ergoomics Society 49, o.5（2007）。

第12章　常态谷：事情虽无法预测，但可以被理解

一篇非同寻常的论文：Matthew J. Salgaik et al., “Measurig the Predictability of Life Outcomes with a Scietific Mass Collaboratio,” Proceedigs of the Natioal Academy of Scieces 117, o. 15（2020）: 8398–8403。

在比赛的第一阶段，参赛团队可以使用一半样本对应的所有数据，其中也包括6个结果：这项研究只使用了4242个家庭的数据。由于隐私问题，有些脆弱家庭研究的家庭数据在分析时被删除了。

在预测“流离失所”这一事件时，最佳模型的相关系数仅为0.22（PC=57%）：为了确保分数的准确性，这场比赛的举办方用了均方误差（MSE）进行测量，这和我们在第一部分使用的指标是一样的。为了更好地进行对比，该研究还设定了一个基准模型。其他每Decisios,” Orgaizatioal Dyamics 14, o. 3（1986）: 5–18; Lisa A. Burke, Moica K. Miller, “Takig the Mystery Out of Ituitive Decisio Makig,” Academy of Maagemet Perspectives 13, o. 4（1999）: 91–99。

当算法能够获得更高的准确性时，人们会更愿意相信算法：Poorima Madhava, Douglas A. Wiegma, “Effects of Iformatio Source, Pedigree, ad Reliability o Operator Iteractio with Decisio Support Systems,” Huma Factors: The Joural of the Huma Factors ad Ergoomics Society 49, o.5（2007）。

第12章　常态谷：事情虽无法预测，但可以被理解

一篇非同寻常的论文：Matthew J. Salgaik et al., “Measurig the Predictability of Life Outcomes with a Scietific Mass Collaboratio,” Proceedigs of the Natioal Academy of Scieces 117, o. 15（2020）: 8398–8403。

在比赛的第一阶段，参赛团队可以使用一半样本对应的所有数据，其中也包括6个结果：这项研究只使用了4242个家庭的数据。由于隐私问题，有些脆弱家庭研究的家庭数据在分析时被删除了。

在预测“流离失所”这一事件时，最佳模型的相关系数仅为0.22（PC=57%）：为了确保分数的准确性，这场比赛的举办方用了均方误差（MSE）进行测量，这和我们在第一部分使用的指标是一样的。为了更好地进行对比，该研究还设定了一个基准模型。其他每个模型的MSE都可以与基准模型进行对比，基准模型是一种“无用的”预测策略：单一值拟合所有数据的预测策略，也就是说，每个样本的预测结果都是训练数据的平均数。为方便起见，我们将它的结果2转换成了相关性。MSE和相关性之间的关系是：r=（Var（Y）- MSE）/ Var（Y），其中，Var（Y）是结果变量的方差，（Var（Y）- MSE）是可以预测的结果的方差。

一项社会心理学方面的回顾性研究：F. D. Richard et al., “Oe Hudred Years of Social Psychology Quatitatively Described,” Review of Geeral Psychology 7, o. 4（2003）: 331–663。

对行为和认知科学的708项研究进行的回顾性研究发现，只有3%的研究所报告的相关系数大于0.5：Gilles E. Gigac, Eva T. Szodorai, “Effect Size Guidelies for Idividual Differeces Researchers,” Persoality ad Idividual Differeces 102（2016）: 74–78。

“研究人员必须认识到，虽然他们了解了脆弱家庭的生活轨迹，但每一项预测都不够准确”：注意，该研究刻意使用了一个已有的描述性大数据集，该数据集虽然很大，但它并不是为了预测特定结果而产生的。这一点与泰特洛克的研究不同，泰特洛克的研究数据使用了所有看起来可能会有预测力的变量。它可能会找到一些不在已有数据集里但能想到的预测因素。因此，基于已有数据集，该研究无法证明无家可归在本质上是不可预测的，也无法证明其他结果是不可预测的。

理解就是描述因果关系，而预测能力就是衡量这一因果关系是否成立的指标：Jake M. Hofma et al., “Predictio ad Explaatio i 个模型的MSE都可以与基准模型进行对比，基准模型是一种“无用的”预测策略：单一值拟合所有数据的预测策略，也就是说，每个样本的预测结果都是训练数据的平均数。为方便起见，我们将它的结果2转换成了相关性。MSE和相关性之间的关系是：r=（Var（Y）- MSE）/ Var（Y），其中，Var（Y）是结果变量的方差，（Var（Y）- MSE）是可以预测的结果的方差。

一项社会心理学方面的回顾性研究：F. D. Richard et al., “Oe Hudred Years of Social Psychology Quatitatively Described,” Review of Geeral Psychology 7, o. 4（2003）: 331–663。

对行为和认知科学的708项研究进行的回顾性研究发现，只有3%的研究所报告的相关系数大于0.5：Gilles E. Gigac, Eva T. Szodorai, “Effect Size Guidelies for Idividual Differeces Researchers,” Persoality ad Idividual Differeces 102（2016）: 74–78。

“研究人员必须认识到，虽然他们了解了脆弱家庭的生活轨迹，但每一项预测都不够准确”：注意，该研究刻意使用了一个已有的描述性大数据集，该数据集虽然很大，但它并不是为了预测特定结果而产生的。这一点与泰特洛克的研究不同，泰特洛克的研究数据使用了所有看起来可能会有预测力的变量。它可能会找到一些不在已有数据集里但能想到的预测因素。因此，基于已有数据集，该研究无法证明无家可归在本质上是不可预测的，也无法证明其他结果是不可预测的。

理解就是描述因果关系，而预测能力就是衡量这一因果关系是否成立的指标：Jake M. Hofma et al., “Predictio ad Explaatio i Social Systems,” Sciece 355（2017）: 486–488; Duca J. Watts et al., “Explaatio, Predictio, ad Causality: Three Sides of the Same Coi?,” October 2018: 1–14。

有一种思维模式会自发地出现在我们的脑海里：与之对应的是外延性思维（extesioal thikig）或非外延性思维，后者也叫意向性思维（itetioal thikig）。Amos Tversky, Daiel Kahema, “Extesioal Versus Ituitive Reasoig: The Cojuctio Fallacy i Probability Judgmet,” Psychological Review 4（1983）: 293–315。

这是因为理解现实的过程是回溯性的：Daiel Kahema, Dale T. Miller, “Norm Theory: Comparig Reality to Its Alteratives,” Psychological Review 93, o. 2（1986）: 136–153。

“后见之明”经典的研究：Baruch Fischhoff, “A Early History of Hidsight Research,” Social Cogitio 25, o. 1（2007）: 10–13; Baruch Fischhoff, “Hidsight Is Not Equal to Foresight: The Effect of Outcome Kowledge o Judgmet Uder Ucertaity,” Joural of Experimetal Psychology: Huma Perceptio ad Performace 1, o. 3（1975）: 288。

与因果思维不同，统计思维通常是费力的，它需要的注意力资源只有当系统2思维（缓慢而审慎的思维模式）发挥作用时才能满足：Daiel Kahema, Thikig, Fast ad Slow. New York: Farrar, Straus ad Giroux, 2011。

第四部分　噪声是如何产生的Social Systems,” Sciece 355（2017）: 486–488; Duca J. Watts et al., “Explaatio, Predictio, ad Causality: Three Sides of the Same Coi?,” October 2018: 1–14。

有一种思维模式会自发地出现在我们的脑海里：与之对应的是外延性思维（extesioal thikig）或非外延性思维，后者也叫意向性思维（itetioal thikig）。Amos Tversky, Daiel Kahema, “Extesioal Versus Ituitive Reasoig: The Cojuctio Fallacy i Probability Judgmet,” Psychological Review 4（1983）: 293–315。

这是因为理解现实的过程是回溯性的：Daiel Kahema, Dale T. Miller, “Norm Theory: Comparig Reality to Its Alteratives,” Psychological Review 93, o. 2（1986）: 136–153。

“后见之明”经典的研究：Baruch Fischhoff, “A Early History of Hidsight Research,” Social Cogitio 25, o. 1（2007）: 10–13; Baruch Fischhoff, “Hidsight Is Not Equal to Foresight: The Effect of Outcome Kowledge o Judgmet Uder Ucertaity,” Joural of Experimetal Psychology: Huma Perceptio ad Performace 1, o. 3（1975）: 288。

与因果思维不同，统计思维通常是费力的，它需要的注意力资源只有当系统2思维（缓慢而审慎的思维模式）发挥作用时才能满足：Daiel Kahema, Thikig, Fast ad Slow. New York: Farrar, Straus ad Giroux, 2011。

第四部分　噪声是如何产生的