极客时间已完结课程限时免费阅读

03 | 数据的期望值:为什么你坐的飞机总是晚点?

03 | 数据的期望值:为什么你坐的飞机总是晚点?-极客时间

03 | 数据的期望值:为什么你坐的飞机总是晚点?

讲述:郭炜

时长14:40大小13.39M

数据给你一双看透本质的眼睛,这里是《数据分析思维课》,我是郭炜。
生活中,你是不是也经常遇到这样的场景,夏天你平时都带着伞,偶尔一天没带伞,结果就正好那天下雨了;不打车时街上到处都是空出租车,但等你需要打车时发现全是满员的;别人的飞机都是正点,你坐飞机永远都是晚点(我自己就是这样)……
类似的事情还有很多,总之你越不希望某件事情发生,这件事情往往就会发生,而在发生之后,有的人就会抱怨说自己运气不好。那真是运气不好吗?这背后有什么原因吗?
其实业内我们经常称这样的“效应”为墨菲定律。今天我们就先来说说它的起源,然后再来聊聊它背后反映的数据分析知识。

墨菲的一个玩笑

1949 年,美国的一位航空工程师爱德华·墨菲与美国空军共同研究高速载人火箭“雪橇 MX981”,需要把 16 个精密传感器装在超重实验设备上测试耐压性。可即便是超重实验设备在巨大压力下都变形了,传感器也没有任何的指示。检查后才发现,原来是负责装配的三个同事把这 16 个传感器全都装反了。
对此,墨菲不经意间开了一个玩笑:“如果一件事情有可能出错,让他去做就一定会弄错”。随后的记者招待会上,他的上司斯塔普把这句话称为“墨菲定律”,并表述为:“如果有两种或两种以上的方式去做某件事情,而其中一种选择方式将导致灾难,则必定有人会做出这种选择。”
随后,人们对墨菲定律又做了更多诠释,比如:
任何事情都不会像它表面上看起来那么简单;
所有任务的完成周期都会比你预计的长;
任何事情只要有出错的可能,就会有极大的概率出错;
如果你预感某件事可能出错,它一定会出错。

背后的数学原理

那么墨菲定律背后的数学原理是什么呢?这里就要引入一个数学概念叫做期望值
什么是期望值?期望值就是对可能出现的结果以概率为权做加权平均。举一个简单的例子,你买了一张彩票,有 10% 的概率中 100 元,40% 的概率中 50 元,50% 的概率不中。
那么期望值是 10%*100+40%*50+50%*0=30 元。
这 30 元做什么用呢?买 1 张彩票或者 100 张彩票都看不太出来,但是如果你买 10 万张彩票,那么你中奖的钱很可能会接近 300 万,也就是 30*10 万。所以,这个 30 元的回报期望值,衡量了你在足够多的次数下,平均每一次事件的获得的数值。
很多人在数据分析中,往往把“均值”和“平均值”混为一谈。这里我告诉你一个简单区分的方法,那就是用英文来区分:
均值(也叫做期望值)英文是 Mean,它是事前预测的,这个值完全是由概率分布决定,也就是我们前面所说的“对可能出现的结果的概率加权平均”;
平均值叫做 Average,它是事后统计,统计样本值的总和除以样本的个数。
带你了解了二者的概念区分后,我们接着来看二者的关系。我想请你先琢磨下这句话:当样本量 N 趋近无穷大的时候,样本的平均值无限接近数学期望(日常计算时时候相等)。这句话是不是听着很熟?对,这就是上节课我们讲到的大数定律(Law of Large Numbers,LLN)。
简单来讲,期望就是反映在大数定律下多次执行某件事情之后,得到的一个最可能的收益结果。例如,我们刚才例子用到的买了 10 万张彩票获利 300 万,平均值(Average)和期望值(或者说均值 Mean)都是 30 元,其实就是利用了大数定律来解释这个现象。

解释墨菲定律

聊完平均值、期望值(均值)和大数定律三者的关系后,我们再回到今天要用数据分析解释的现象:墨菲定律。
人都有一个特殊的心理机制,那就是倾向于记住一些不好的事情。就像航班晚点的概率对每一个人而言都是一样的,但对我来讲,每次飞机晚点的等待就会让我印象深刻,而平时没有晚点的时候,我的注意力都集中在其他事情上。
现在,我们可以把坏事情的期望定义成 M,它代表着你记住这个坏事情的概率,坏事情的心理影响定义成 X,概率为 R1;再把好事情的期望定义成 N,它代表着记住这个好事情的概率,好事情的心理影响定义成 Y,概率为 R2。根据今天所学,我们就有了如下两个公式。
抽象一下,你经常担心一个坏事的发生,比如说事情 A,我们假设 A 发生时对你产生的心理作用是 X,事情 A 不发生对你产生的心理作用是 Y。这个时候显然 X 是大于 Y 的,所以当发生 A 这件事情的时候,你受到的心理影响 X 就比 Y 大。
其实,你在担心一件事情的发生之时,这件事情已经具备了发生的大多数条件。我们假设事件 A 发生的概率是 R,那么当你担心这件事情发生(R1)和不担心这件事情发生(R2)的时候,两个概率是不一样的,R1 一定大于 R2。
这样一来,把我们的讨论代入前面的公式,一个我们担心的坏事的发生期望就像下面这个图所显示一样,对比一下你就会发现,墨菲定律的原理其实是由我们对于好事情和坏事情的期望值差异造成的。简单讲,印象深刻再加上担心的时候概率高,自然也就担心什么发生什么了。
我们现在用墨菲定律来解释一下这节课开头的情景:
夏天是个多雨的季节,所以你会记得要随身带伞。但恰好有一天你没带伞,并且看天阴沉沉的好像会下雨,于是你十分担心,最后真下雨了,印象自然深刻;
你着急打车的时候一般都是高峰期,再加上你平时高峰期也经常打不到车,于是就更加担心,最后发现全是满员,对打不到车这件事印象深刻;
你在很忙的时候,为了赶时间总选晚上的飞机,前面只要有一个航班晚点了,晚上这一班一定晚点,再加上一旦晚点,你回家就基本半夜了,所以印象尤其深刻。
于是,墨菲定律就产生了。

如何规避墨菲定律

了解了墨菲定律的成因后,你是不是想问,那我们怎么才能避免掉入“墨菲定律”的陷阱呢?
其实影响期望的变量分为两个部分,分别是心理影响大小以及发生概率大小,所以我们可以从这两个方面入手。
对于心理影响来说,我们要做的就是不断调整事情对你心里影响的预期,让它们趋同。特别是遇到坏事情的时候,你可以通过增加 B 计划等方式,调整预期以降低坏事情发生对你的心理影响
对风险的概率来说,你可以优化流程,提高自身能力,尽可能减少事件出错的概率
这么说可能还是有些抽象,我们来看几个工作与生活中的运用。
“为大概率坚持,为小概率备份”——创业的时候,我们要努力为好的期望(N)去坚持,同时考虑为坏的影响(X)备份,应该尽力降低坏期望(R1)的风险。
“已知的是成本,未知的才是风险”——如果坏的影响(X)为已知,那么即使你按照坏事件发生概率(R1)100% 来准备资金,这批资金也算是你付出的成本;但如果坏影响(X)未知,那么无论坏事件发生概率(R1)为多少,都是风险,因为你不知道这个坏事件究竟会造成多大的影响。
“项目风险控制”——项目管理当中有各种风险管理和预防措施,把风险分为很多类,例如静态风险、动态风险、局部风险、整体风险,同时也会把风险应对措施细分为很多类,其实背后的核心是为了去避免墨菲定律的发生,让整体项目在项目经理的期望值下正确运行。
“生活中的风险控制”——我们在生活中,其实也是可以借用这种风险控制的方法论,识别生活中的风险并做好准备,这样才能够在墨菲定律发生的时候不会手忙脚乱。例如提前看看天气预报,查看这趟航班的过往准点率,预估自己乘坐航班情况。在去重要会议的时候,多提前一些时间。这些生活里的小事你或许平时不会太过于在意,但请相信,一旦你把这些小事落到实处,你对生活的掌控力会大大提升。
数据分析解释给你的是现实背后的规律,学以致用才可以让它们发挥最大的价值。

小结

好,总结一下,今天我们通过墨菲定律给你介绍了一个有意思的概念叫期望值(Mean),它是对可能出现的结果的概率加权平均,期望值完全是由概率分布决定。而我们之前讲的平均值一般是指算数平均值,也就是一组数据中所有数据之和再除以数据的个数某个事情长期不断发生,次数足够多后会达到我们预设的期望值,这就是大数定律。
这几个概念相互依存,又相互不同。其实你可以把平均值、大数定律和期望值这三节课看成一个小整体,对照进行学习。
对平均值来说,你要学会为不同事物去分组,用更细分的数据来看待问题。对于大数定律来说,要成事,其实需要我们不要有赌徒心态,要学会持续投入。而对于期望值来说,平衡预期和未雨绸缪这两个词,希望你能够在生活中灵活运用。
其实,这几个数据分析的概念都告诉我们一个最朴实的道理:没有事情可以一蹴而就(平均值),我们需要努力足够多的次数(大数定律),学会规避风险(期望值)。这样最终在若干年后,企业和个人才能有一份满意的企业 / 个人数据报表。
数据给一双看透本质的眼睛,调整好自己的期望,持续学习持续进步。

课后思考

今天我们把平均值、大数定律和期望值给你串讲了一下,你最近在生活中遇到过墨菲定律的事情么?你觉得怎么做可以减轻和规避这些风险?希望你分享在留言区,我们一起共同成长。
另外,如果你对墨菲定律还有一些其他的认知,也可以写在留言区,我们一块讨论。感谢阅读,如果你觉得这篇文章对你有帮助的话,也欢迎把它分享给更多的朋友。
分享给需要的人,Ta购买本课程,你将得18
生成海报并分享

赞 64

提建议

上一篇
02 | 大数定律与小数陷阱:生活是随机还是有定数的?
下一篇
04 | 随机对照试验:章鱼保罗真的是“预言帝”么?
unpreview
 写留言

精选留言(49)

  • 芳菲
    2021-08-03
    以前一直不喜欢给别人打电话,害怕被拒绝,常常思来想去很久,结果不仅没完成任务还浪费了时间; 后来一方面告诉自己,被拒绝是正常的,根本不用有心理负担;就算被骂一顿,自己也少不了一块肉; 另一方面准备充分,如果对方拒绝自己该怎么应对; 这样既降低了自己对坏事发生的担心程度,又降低了坏事发生对自己的影响。
    展开

    作者回复: 是的,长期来做是增大了自己成功的几率。

    共 3 条评论
    27
  • mtfelix
    2021-08-02
    记得有个飞行员有个检查清单,这是不是也是对付墨菲定律的法子?那清单法在理论上如何解释?

    作者回复: checklist是典型的风险规避法,通过过去的经验和教训,避免风险发生概率r1

    共 2 条评论
    11
  • mmfw
    2021-08-03
    最近刚换新工作环境,大环境对我们公司不利,要裁员,总是很担心被淘汰试用期过不去,听了老师的大数原理和墨菲定律,学习到应该更长远看问题不纠结眼前得失,墨菲定律也说不要总往坏处想,且要给自己降低被淘汰风险要做到让自己能力增加,这也是降低被淘汰风险。我一直是一个悲观主义者,对即将要发生的事情都经常往坏里想,但过往的事情都结果比较好,我认为是我对待结果的预期很差,结果即使不好,可能是自己已经有了心理准备,那么我想问老师这个和墨菲定律是不是有点矛盾?我都是很焦虑,但是结果都比较满意!
    展开

    作者回复: 做最坏的打算,做最好的准备,这正是墨菲定律准备方法呀。你做的挺对的,需要提高的是一颗平常心,生活本身就是一种经历,无论是痛苦的还是快乐的,做好准备了就不要过度焦虑,放轻松,体会生活的美好。

    共 4 条评论
    9
  • hc
    2021-11-02
    1.讲解生动,通俗易懂。 2.干货很多,知识密集,值得多听几遍。 3.声音抑扬顿挫。不会走神。 以上3点,做到每一点都很难,很多课程有2点就已经很不错了。这门课3点都做到了。 不得不说,这是我在知识付费产品里(包括得到)买过的最好的一门课。 感谢老师!
    展开

    作者回复: 感谢夸奖,多多分享,让小伙伴们也建立起卓越的数据价值观。

    8
  • 大林 Kralite
    2021-09-01
    坏事对心理产生影响的期望 = 坏事的心理影响 * 担心坏事发生的概率 这个公式是值得推敲的,坏事的心理影响越大,担心坏事发生的概率自然就越高,两者是正相关的。用“担心坏事发生的概率”来强行解释,我觉得有点生拉硬拽套公式的感觉,因为本质其实就是坏事的心理影响。 除非将公式换成: 记住坏事的期望 = 坏事的心理影响 * 坏事发生的概率 会稍稍合理一些。
    展开
    6
  • 大馒头丫
    2021-11-05
    所以脸皮厚、若愚的人和阿甘那种人容易成事,幸福感强。

    作者回复: 坚持和执着

    6
  • 大林 Kralite
    2021-09-01
    R1的定义,前文是说“担心事情发生的概率”,后文又变成“坏事情发生概率”,两者是截然不同的,请问确切应该是哪一个? 我理解如果M是坏事情对心理影响的期望,应该是担心事情发生的概率。
    4
  • 五彩斑斓的輝
    2022-04-12
    打破墨菲定律的心法: 知止而后有定, 定而后能静, 静而后能安, 安而后能虑, 虑而后能得。
    展开
    2
  • momo
    2021-11-23
    现在,我们可以把坏事情的期望定义成 M,它代表着你记住这个坏事情的概率,坏事情的心理影响定义成 X,概率为 R1。 请问这个R1和R2发生的概率是差不多的吧? 但是后面讲:你在担心一件事情的发生之时,这件事情已经具备了发生的大多数条件。我们假设事件 A 发生的概率是 R,那么当你担心这件事情发生(R1)和不担心这件事情发生(R2)的时候,两个概率是不一样的,R1 一定大于 R2。 发生与不发生的概率为什么会不一样呢? 我没太明白。 我浅显的认识是这样的:一件事情会往坏、好的方向发生的概率分别为R1,R2,在大数定律下,二者差不多。坏、好事情给人的心理影响(M1,M2)。 由于坏事情给人的印象深刻得多,所以它的权值就大,于是坏事情发生的期望值(=M1*R1)大于好事情发生的期望值(=M2*R2)
    展开
    2
  • 卢梦圆
    2021-10-27
    第一天上班想着早起不要迟到,就偏偏迟到了

    作者回复: 风险准备的不够,哈哈

    2
  • Haoz
    2021-10-21
    郭老师今天的课让我明白了一个道理,对于任何事情,只要足够了解,便能对其进行拆解,从而降低实现难度以及避免过大的风险。例如对于期望值,我们可以拆解为「影响 * 概率」,对于坏事情,「影响方便」我们可以通过 plan B 以及降低心理预期的方式来降低,「概率方面」我们可以通过 checklist 的方式来降低,从而大大降低了不好的事情发生对于我们的影响。

    作者回复: 是,年少时觉得经验没什么用,后来发现他变成了一个样子叫做认知,影响着我们每天的决策

    2
  • Yao1931
    2022-04-21
    最近项目上解决了一个问题,总担心上线会出现bug。结果上线那天真的发现了有问题,这就是墨菲定律。 原因: 担心出bug的心理影响 > 不出bug的心理影响 新解决的代码出bug的几率 > 不出bug的几率 M > N 解决: 上线前最好风险把控,在预生产环境多测试 找同事帮忙review代码,多发现问题 找到plan B
    展开
    1
  • yang
    2021-08-25
    墨菲定律的数学表达式就是1-(1-p)^n
    1
  • fly
    2021-08-09
    总是丢钥匙,很着急。 多配两个,放在随身带着小包里

    作者回复: 一般是办公室会留一个,父母家留一个备份。

    共 4 条评论
    1
  • peilf
    2022-09-23 来自浙江
    终于知道均值为啥要叫做数学期望了
  • Liu,Lei
    2022-08-19 来自北京
    有一点不是很理解,一件事发生的概率R是客观的,不管我们担心与否,都不会改变R,所以应该R1=R2。之所以有莫非效应,就是因为人类的心理天生对坏的事情的权重大于好的事情,所以造成偏见。
  • 数据分析星球
    2022-07-25
    做好生活中的各种小事,把风险发生的概率降低,同时给自己做好plan b做好备份,降低坏事的心理预期,这样就能减少坏事发生的期望。也就是做最大的努力,做最坏的打算!
  • 涂新波
    2022-07-22
    以前小学放学时下雨,没有带伞。明明希望爸爸来接,但嘴上却说肯定不回来接,也算是降低期望值吗?
  • Joanna
    2022-05-05
    出现墨菲定律的原因,是由于准备不足,或对即将发生的事情没有充分的认识,没有制定有效应对的方案。
  • 学要有所用
    2022-04-24
    一句话:未雨绸缪,学会应对可能的风险
新人学习立返 50% 购课币
去订阅《数据分析思维课》新人首单¥59