消除噪声没有噪声的规则和算法当有大量数据......《噪声》摘录

管理类 日期 2022-06-20
· 消除噪声

没有噪声的规则和算法

· 当有大量数据时,机器学习算法比人和简单模型的预测要好。相比于人类的判断,即使是最简单的规则和算法也具有很大的优势,因为它们没有噪声,也不会尝试将复杂而无效的因素用于做预测。

· 既然缺少预测结果所需的数据,那么为什么不使用均等权重模型?它几乎和最合适的回归模型一样好,且比人类视情况而定的判断更胜一筹。

· 你不认同该模型的预测?是由于这里有“断腿”的例外情况,还是单纯因为不喜欢这个预测?

· 算法当然也会犯错,但是如果人类犯的错更多,那么我们应该相信谁?· 消除噪声

没有噪声的规则和算法

· 当有大量数据时,机器学习算法比人和简单模型的预测要好。相比于人类的判断,即使是最简单的规则和算法也具有很大的优势,因为它们没有噪声,也不会尝试将复杂而无效的因素用于做预测。

· 既然缺少预测结果所需的数据,那么为什么不使用均等权重模型?它几乎和最合适的回归模型一样好,且比人类视情况而定的判断更胜一筹。

· 你不认同该模型的预测?是由于这里有“断腿”的例外情况,还是单纯因为不喜欢这个预测?

· 算法当然也会犯错,但是如果人类犯的错更多,那么我们应该相信谁?第11章

哪里有预测,哪里就有客观无知

我们经常同一些公司高管分享第9章和第10章中的研究内容,并通过发人深省的发现让他们意识到人类的判断是有限的。这些发现已经存在了半个多世纪,应该很少有人能避开它们,但人们仍然对这些发现很抵触。

在我们的听众里,有一些高管会很自豪地告诉我们,相比于定量分析,他们更相信自己的直觉;其他人虽然没明说,但他们也有同样的看法。有关管理决策的研究表明,高管通常会凭直觉、感受或简单的判断(此处的判断与本书中“判断”一词的含义不同)来行事,尤其是级别较高的、经验丰富的高管。

简而言之,决策者喜欢听从自己的直觉,且多数人对直觉传递出的信息颇为满意。这里存在一个问题:这些极其自信的权威人士究竟从他们的直觉中“听”到了什么呢?

一篇有关管理决策中的直觉的综述性文章,将直觉定义为对给定行动方案的一种判断。这种判断是一种预感或关于正确性/合理性的第11章

哪里有预测,哪里就有客观无知

我们经常同一些公司高管分享第9章和第10章中的研究内容,并通过发人深省的发现让他们意识到人类的判断是有限的。这些发现已经存在了半个多世纪,应该很少有人能避开它们,但人们仍然对这些发现很抵触。

在我们的听众里,有一些高管会很自豪地告诉我们,相比于定量分析,他们更相信自己的直觉;其他人虽然没明说,但他们也有同样的看法。有关管理决策的研究表明,高管通常会凭直觉、感受或简单的判断(此处的判断与本书中“判断”一词的含义不同)来行事,尤其是级别较高的、经验丰富的高管。

简而言之,决策者喜欢听从自己的直觉,且多数人对直觉传递出的信息颇为满意。这里存在一个问题:这些极其自信的权威人士究竟从他们的直觉中“听”到了什么呢?

一篇有关管理决策中的直觉的综述性文章,将直觉定义为对给定行动方案的一种判断。这种判断是一种预感或关于正确性/合理性的信念,但这种判断没有明确的理由或依据,从本质上说,就是“知道是什么,却不知道为什么”。我们认为,这种“知道是什么,却不知道为什么”的直觉,实际上就是我们在第4章中提到的做出判断时产生的内部信号。

内部信号是一种自我管理的奖励,是一个人努力(有时或许没那么努力)做出判断并最终完成判断后的奖励。它是一种令人满意的情感体验,也是一种令人愉悦的一致感,它使我们感觉我们所考虑的证据和做出的判断是正确的,就如同玩拼图游戏时把所有的碎片都拼对了一样。稍后我们将看到,隐藏或忽略那些与判断不匹配的证据还可以增强这种一致感。

内部信号很重要,但具有误导性,因为内部信号往往会被理解为一种信念而不是感觉。这种“感觉正确”的情感经验伪装成了我们对判断有效性所持的信心——我知道该判断是正确的,即使我不知道为什么。

然而,对判断所持有的信心并不能保证判断的准确性,许多充满信心的预测都是错的。尽管偏差和噪声都会造成预测误差,但此类误差最重要的来源并非受限于预测性判断实际有多好,而是受限于预测性判断应该有多好。我们将这一局限性称为“客观无知”(objective igorace),这也是本章的重点。

客观无知

如果你经常进行预测性判断,那么你可以问自己一个问题,这个信念,但这种判断没有明确的理由或依据,从本质上说,就是“知道是什么,却不知道为什么”。我们认为,这种“知道是什么,却不知道为什么”的直觉,实际上就是我们在第4章中提到的做出判断时产生的内部信号。

内部信号是一种自我管理的奖励,是一个人努力(有时或许没那么努力)做出判断并最终完成判断后的奖励。它是一种令人满意的情感体验,也是一种令人愉悦的一致感,它使我们感觉我们所考虑的证据和做出的判断是正确的,就如同玩拼图游戏时把所有的碎片都拼对了一样。稍后我们将看到,隐藏或忽略那些与判断不匹配的证据还可以增强这种一致感。

内部信号很重要,但具有误导性,因为内部信号往往会被理解为一种信念而不是感觉。这种“感觉正确”的情感经验伪装成了我们对判断有效性所持的信心——我知道该判断是正确的,即使我不知道为什么。

然而,对判断所持有的信心并不能保证判断的准确性,许多充满信心的预测都是错的。尽管偏差和噪声都会造成预测误差,但此类误差最重要的来源并非受限于预测性判断实际有多好,而是受限于预测性判断应该有多好。我们将这一局限性称为“客观无知”(objective igorace),这也是本章的重点。

客观无知

如果你经常进行预测性判断,那么你可以问自己一个问题,这个问题可能适用于很多工作,如选择股票或预测职业运动员的表现。为了方便起见,我们使用在第9章中出现过的筛选应聘者的例子。假设近年来你已经评估了100名应聘者,现在,通过将自己的评估与应聘者入职后的实际表现进行对比,你就能够对自己的招聘决策的品质进行评估。如果你随机选出两名你评估过的应聘者,你认为你的事前判断和事后结果达成一致的可能性有多大?换句话说,比较任意两名应聘者,你认为更有潜力的应聘者实际上表现也更好的概率有多大?

我们经常就此问题对高管进行非正式调查,高管们的答案大部分为75%~85%。我们怀疑,他们可能由于谦虚或不想被认为是自吹自擂才做出了这样的回答,否则他们给出的比例会更高。研究人员在与高管们私下一对一的交谈中发现,高管们实际的自信程度往往更高。

既然你已经熟悉一致性比率(PC),那么你可以轻易地看出此类评估的问题。PC为80%大致对应的相关系数为0.8,在现实中人们的预测能力几乎无法达到这么高的水平。近期一篇有关人才选拔的报告指出,人类判断的预测相关系数远低于0.8,平均而言,人类判断的预测相关系数为0.28(PC=59%)。

鉴于人才选拔的难度很大,人类判断的表现糟糕也在情理之中。年轻人刚从事一份新工作时会面临许多机遇和挑战,这些机遇和挑战会以各种方式改变他的生活。他可能很幸运,遇到一位信任他、给他机会、在工作上提携他、帮他建立信心、能调动他的工作积极性的主管;他也可能没那么幸运,尽管自己没犯什么错,职业生涯却充满挫折。同样,他在私人生活中可能遇到的很多事也会影响他的工作表现,而这些事都是人们在当下无法预测的,就算是世界上最好的预测模型问题可能适用于很多工作,如选择股票或预测职业运动员的表现。为了方便起见,我们使用在第9章中出现过的筛选应聘者的例子。假设近年来你已经评估了100名应聘者,现在,通过将自己的评估与应聘者入职后的实际表现进行对比,你就能够对自己的招聘决策的品质进行评估。如果你随机选出两名你评估过的应聘者,你认为你的事前判断和事后结果达成一致的可能性有多大?换句话说,比较任意两名应聘者,你认为更有潜力的应聘者实际上表现也更好的概率有多大?

我们经常就此问题对高管进行非正式调查,高管们的答案大部分为75%~85%。我们怀疑,他们可能由于谦虚或不想被认为是自吹自擂才做出了这样的回答,否则他们给出的比例会更高。研究人员在与高管们私下一对一的交谈中发现,高管们实际的自信程度往往更高。

既然你已经熟悉一致性比率(PC),那么你可以轻易地看出此类评估的问题。PC为80%大致对应的相关系数为0.8,在现实中人们的预测能力几乎无法达到这么高的水平。近期一篇有关人才选拔的报告指出,人类判断的预测相关系数远低于0.8,平均而言,人类判断的预测相关系数为0.28(PC=59%)。

鉴于人才选拔的难度很大,人类判断的表现糟糕也在情理之中。年轻人刚从事一份新工作时会面临许多机遇和挑战,这些机遇和挑战会以各种方式改变他的生活。他可能很幸运,遇到一位信任他、给他机会、在工作上提携他、帮他建立信心、能调动他的工作积极性的主管;他也可能没那么幸运,尽管自己没犯什么错,职业生涯却充满挫折。同样,他在私人生活中可能遇到的很多事也会影响他的工作表现,而这些事都是人们在当下无法预测的,就算是世界上最好的预测模型也无法预测,这种难以解决的不确定性包括所有与你的预测有关但当下无法得知的信息。

此外,与应聘者有关的很多事情从原则上说应该是可以知道的,但你在做判断时并不知道。对我们的目的而言,不管这种知识上的差距是源于缺少足够的预测性测试,还是由于获取更多信息的成本过高,抑或是由于你自己的调查疏忽,都无关紧要,不管是哪个原因,你都处于信息不完备的状态中。

难以琢磨的不确定性(未知之事)和不完备的信息(可知但不知之事)都将使完美预测变得不可能。这些未知信息并非源于判断中的偏差或噪声,而是源于任务本身的客观特征。这种由于重要信息缺失而产生的客观无知严重限制了人们判断的准确性,为避免用词太过专业,我们用“无知”来指代这种不确定性。这样可以避免混淆“不确定性”和“噪声”。不确定性是关于世界和未来的,噪声是本应相同的判断中出现的变异。

在某些情况下,我们能获得的信息比另外一些情况下更多,而且客观无知更少。此时,大多数专业判断的表现都是非常不错的。例如,医生可以对很多疾病做出准确的诊断,律师在面对法律纠纷时可以准确地判断法官的判决结果。

但是,一般而言,你仍然可以想象到,从事预测性工作的人还是会低估自身的客观无知。过度自信是已经被大量研究证明了的一种认知偏差。具体而言,人们往往会过度高估自己做出准确预测的能力,即使是在信息有限的条件下。我们所讲的预测性判断中的噪声也可以也无法预测,这种难以解决的不确定性包括所有与你的预测有关但当下无法得知的信息。

此外,与应聘者有关的很多事情从原则上说应该是可以知道的,但你在做判断时并不知道。对我们的目的而言,不管这种知识上的差距是源于缺少足够的预测性测试,还是由于获取更多信息的成本过高,抑或是由于你自己的调查疏忽,都无关紧要,不管是哪个原因,你都处于信息不完备的状态中。

难以琢磨的不确定性(未知之事)和不完备的信息(可知但不知之事)都将使完美预测变得不可能。这些未知信息并非源于判断中的偏差或噪声,而是源于任务本身的客观特征。这种由于重要信息缺失而产生的客观无知严重限制了人们判断的准确性,为避免用词太过专业,我们用“无知”来指代这种不确定性。这样可以避免混淆“不确定性”和“噪声”。不确定性是关于世界和未来的,噪声是本应相同的判断中出现的变异。

在某些情况下,我们能获得的信息比另外一些情况下更多,而且客观无知更少。此时,大多数专业判断的表现都是非常不错的。例如,医生可以对很多疾病做出准确的诊断,律师在面对法律纠纷时可以准确地判断法官的判决结果。

但是,一般而言,你仍然可以想象到,从事预测性工作的人还是会低估自身的客观无知。过度自信是已经被大量研究证明了的一种认知偏差。具体而言,人们往往会过度高估自己做出准确预测的能力,即使是在信息有限的条件下。我们所讲的预测性判断中的噪声也可以

声明:部分内容来自互联网,如侵权请联系删除!
友情:思诺速记

相关推荐

管理类 / 日期:2024-03-11
理解那个东西,但是我已经发现,他的信息距离和我越来越近了。因为他不再看《舟山晚报》,我也不再看《新民晚报》了,我们看的都是腾讯新闻App,看新闻头条,他也看我的朋友圈。所以信息高速一旦被打通了,一、二线和三、四线城市之间的认知壁垒也逐渐被打破了。要掌握70%~80%的都市消费,其实就是掌握两亿中产阶层。像分众这样的公司,之所以能够覆盖78%有家庭汽车的、80
管理类 / 日期:2024-03-11
实现资产最大限度的增值。一些合伙人可以通过“股权转让”等资产重组方式退出。二、退出如何结算当合伙人退出公司后,其所持的股权应该按照一定的形式退出。一方面对于继续在公司里做事的其他合伙人更公平;另一方面也便于公司的持续稳定发展。而合伙人退出之后,如何结算也是一个问题。一般采用三种方法:估值法、参考相关法律、另外约定。估值法,即当合伙人中途退出,退出时公司可以按
管理类 / 日期:2022-06-20
反而还会激化矛盾。相反,管理者要有礼、有节地消除问题。邹总:“上次的项目进展得怎么样了?”唐潇:“进展得不太顺利。”邹总:“进展得不太顺利?”唐潇:“对,我想这不该是我的工作。”邹总:“为什么不是你的工作呢?”唐潇:“因为我觉得这是我工作范围以外的事情。”邹总:“原来是这样。那么,对于你来说,什么是你工作范围以内的事情呢?”唐潇:“就是被分配给我的事情或我的
管理类 / 日期:2022-06-20
任正非志存高远,为华为注入的经营理念是,要么不进入一个行业,要么一定要做到全球前三名,成为有话语权的关键玩家。正是因为这个高追求,华为在选择老师对标学习时,必然会在全世界范围内寻找最好的老师,把全世界最好的公司实践作为标杆,比如流程方面对标IBM,运营商业务对标爱立信,手机业务对标苹果……这在后来演变成为华为人的思维惯性。在启动任何新业务时,华为不是一上来就

推荐列表

热门标签