改变战争历程的秘密统计学家们

统计学家们的眼光很贼,他们洞悉一切,你看到的和看不到的秘密。这里是关于统计学家改变战争历程的三个小故事。

故事一:坠落的飞机不说话(幸存者偏差)

这是迄今为止,最牛逼的统计学家团队。

哥伦比亚大学旁,哈林的一个秘密公寓,这里汇聚着全美国最受尊敬的18名数学家和统计学家,他们做一件事:通过统计学分析来降低战损。

他们从位于 Haelem 的一个秘密公寓经营,这是哥伦比亚大学 401 WEST 118th Street 的一个街区。这间公寓里住着18名美国最受人尊敬的数学家和统计学家,精神充沛地收集并分析数据,第二次世界大战期间,他们对华盛顿 DC 在军用飞机上的分析结果引起了海军上将和海军陆战队、空军将军的反思。SRG的主任 Allen Wallis 说他们的团队“这肯定是成就最为非凡的统计学家团队。”

他们的影响是难以估量的。

在1944年12月的坦克大决战期间,几名高级军官从战场飞往华盛顿,花了一整天的时间来讨论向地面部队发射空中炮弹的引信最佳设置,然后飞回战场,这样他们就能立刻把分析结果投入战争应用,除此之外,弗里德曼早期对于熔断器的研究给了他关于引信的实际情况丰富和准确的知识。
弗里德曼回忆录:两个幸运的人

响应为祖国服务的号召,这些人中的许多都举家搬到曼哈顿。其中最主要的一个角色,亚伯拉罕·沃尔德 ,一名罗马尼亚神童,他的父母在家教他。之后在1931年,他获得了维也纳大学的数学博士。1938年,他逃离了奥地利的纳粹,来到纽约,开始在哥伦比亚大学教授统计学。

此后不久, SRG 招募沃尔德加入。美国空军迫切需要解决一个关键问题。在欧洲和太平洋地区的盟军飞机正在以惊人的速度被击落。在这场战争期间,超过43581架飞机可能会因为德国和日本的对空高射炮坠毁。1943年8月的一次由376架飞机发起的空袭中,60架 B-17s被击落。损失率是如此之高,以致于统计上不可能让一名军人在欧洲执行任务25次。

飞行员们面临着不可能完成的任务, SRG 让 Wald 为飞行在敌人领土上空的飞机设计和开发新的装甲防护。空军想加强飞机,但只能对飞机的一小部分进行装甲强化。因为每磅装甲会减少一磅炸弹的有效荷载能力,降低战队的攻击能力。

为了帮助分析,空军为 Wald 提供来自前线的数据,士兵们记录了在机身、机翼和返回基地的所有飞机上弹孔的数量和位置。返回的轰炸机伤痕集中在尾炮和机翼,所以,空军高层建议加强对这些伤痕累累部位的装甲。

沃尔德激烈反对。

返回的飞机的标记也显示出这是飞机最强大的地方,这些部位能承受伤害并依然能返回基地。机身和机翼最不需要装甲加强,这些飞机的这两个部位遭受伤害并返回基地,所以沃尔德认为这些部位并不是需要加强的关键。

有成千上万的飞机没有飞回来,因为它们被击中其他地方:发动机,尾部和驾驶舱。这些部位更应该被重点保护。

美国空军的疏忽被称为生存偏差,这是一种困扰所有领域数据分析师的认知偏差。

这是我碰到的使用统计数据并理解统计偏差的重要性时最难忘的故事。

故事二:统计学驱动的决策优化

1941年3月,英国空军上将鲍希尔听从科学家们的建议,成立了一个由专家组成的“作战研究小组”,共同商讨装备使用的最佳对策。当时,英国皇家空军用来攻击德国潜艇的深水炸弹,命中率只有2%左右,有人提出应尽快研制新的命中率高的炸弹,有人则认为应好好研究使用方法。众说纷纭,决策者进退两难。

数理统计学家威廉斯教授在研究工作中,从空军驾驶员记录的大量数据中发现,大约有40%的飞机在看到潜艇或潜艇刚刚下潜约15秒,下潜深度只有20-30英尺时,就投放了深水炸弹。而深水炸弹都是在100-200英尺的深度爆炸。威廉斯认为问题是出在定深标准上,因为炸弹在100-200英尺的深度爆炸时,潜艇还没有下潜到这样的深度,当然也就炸不着了。所以他建议,重新制定深水炸弹的定深标准,同时把攻击的重点放在刚能看见和下潜不到15秒的那些潜艇上。鲍希尔采纳了这一意见后,使皇家空军击沉德国潜艇的数量,一下子提供了5倍多。

故事三:正态分布的小故事

由于战争,德国有一个时期物资特别紧缺,对面包实行配给制:政府把面粉发给指定的面包房,面包师傅烤好了面包再发给居民。

有一个统计学家,怀疑他所在区域的面包师傅私扣面粉,于是就天天称自己的面包。几个月以后,他去找面包师傅,说:“政府规定配给的面包是400克,因为模具和其他因素,你做的面包可能是398、399克,也可能是401、402克,但是按照统计学的正态分布原理,这么多天的面包重量平均应该等于400克,可是你给我的面包平均重量是398克。我有理由怀疑是你使用较小的模具,私吞了面粉。”面包师傅承认确实私吞了面粉,并再三道歉保证马上更换正常的模具。

又过了几个月,统计学家又去找这个面包师傅,说:“虽然这几个月你给我的面包都在400克以上,但是这可能是因为你没有私吞面粉,也可能是因为你从面包里特意挑大的给我。同样根据正态分布原理,这么多天不可能没有低于400克的面包,所以我认为你只是特意给了我比较大的面包,而不是更换了正常的模具。我会立刻要求政府检查你的模具。”面包师傅只好当众认错道歉,接受处罚。

写在最后

统计学家们的存在,大概是为了发现我们普通人发现不了的秘密。曾经,统计学家们改变了战争历程,在今天的产品战争里,统计学和数据科学家们正在改变产品历程。不骄傲的说,吆喝科技的可能是东半球产品优化经验第一丰富的统计学家们,正在用丰富的统计学和数据分析知识、经验以及我们强大的A/B测试产品,改变更多的产品发展历程。

参考文章:
http://tomtunguz.com/clandestine-statisticians/

本文作者:[email protected]吆喝科技

时间: 2024-08-09 19:03:48

改变战争历程的秘密统计学家们的相关文章

军事体系

复盘钓鱼岛 Shi Jian 并推理日后进程,我们从日本的困境开始.日本经济持续衰退实际上是美国造成的,其中有三个重要时间点,一是1985年广场协议,日元被迫升值,从此走向了股市地产双泡沫:第二是1992年泡沫经济被打爆:第三是1998年东南亚金融战败. 此后要解决日本的发展问题,大概有三条路可以走: 一是爬科技树,工业与创新相结合,让本国制造业始终领先,用一线产品夺取国际市场,但工业创新意味着军工突破,所以美国就一直压制他,以至于日本 在二战后的科研不仅被限制在“民用”这一范围,就连研发方向和

[人物]一个预言家的命运:忽悠了马云的“骗子”,风口上的先知

“我是一个既得利益者,”这个被称为中国10年来最成功CTO的男人说,“你能写写我的运气吗?” 阿里巴巴集团技术委员会主席王坚 每日人物 / ID:meirirenwu 文 / 张寒 编辑 / 金焰 难以想象他这样一个人会承担如此多的骂名. 他看上去天真无害,是一个最标准的工程师模样.格子衬衫,右手的袖子因为配合挥舞的动作,常常耷拉下来. 一脸羞涩的笑,55岁的年龄,走起来像是记忆里初中那种沉默的男孩.斜着肩膀大跨步,为了减少对视,低着头快走. 在进入阿里之前,他的人生不可谓不顺风顺水. 30岁的

《高效能青少年的七个习惯》读后感作文3900字

<高效能青少年的七个习惯>读后感作文3900字:习惯一: 积极处世(be proactive )简而言之,就是对自己的行为负责.用西恩的话说就是:"在我们家长大经常是巨大的痛苦,因为我爸爸总是让我对生活中的每一件事情负责." 世界上有两种人--积极主动的人和被动接受的人,前者对自己负责,后者埋怨别人:前者创造机会,后者坐等事情发生.He wanted me to learn that there are two types of people in the world--t

最新版苹果字体设计的秘密和改变

iOS 9发布后,可能很多用户都没有察觉到界面视觉中那些产生了变化,今日这里介绍的是IOS 9中界面字体的细微变化带来的影响.OS 9的系统字体变成了苹果新推出的旧金山字体,代替了之前用的Helvetica Neue. Helvetica(上),旧金山字体(下) 旧金山字体其实很早的时候已经使用在Apple Watch中,如今苹果更多这种字体运用起来,现在我们市面上使用的一些常见的苹果设备都是用了这种字体,例如:Apple Watch.iPhone.iPad和Mac. Apple Watch 从

70岁任正非首次公开演讲:华为没有秘密,任何人都可以学

在2015年1月22日达沃斯论坛上,华为创始人.总裁任正非 首次公开演讲,并与BBC主播的对话.此前,任正非很少接受媒体采访,也从未在公司以外公开演讲,这是任正非有史以来第一次在公司以外的公开场合发表演讲,也是首次分享其从军经历,以及军人身份的创业坎坷历程. 他最后说来演讲有被骗的感觉,本以为是"闭门会议",不过"丑媳妇总要见公婆". 以下为任正非达沃斯演讲实录,略有删减: 提问:您(做企业)的动机是什么? 任正非:做华为并不是意想之中的. 我们军人最大的问题,是不

Aaron Swartz – 互联网天才开挂的人生历程:每时每刻都问自己,现在这世界有什么最重要的事是我能参与去做的?

Aaron说的一句话让我挺有感触的-- 相信你应该真的每时每刻都问自己,现在这世界有什么最重要的事是我能参与去做的? 如果你没在做那最重要的事,那又是为什么? 1986年11月8日,有个叫Aaron Swartz的人在美国芝加哥伊利诺伊州出生.因为他父母创办了一个软件公司,所以,Aaron在3岁的时候就接触到了电脑,然后就着迷了. 我们先通过Aaron Swartz 的青少年时期来看一下他是怎么样的一个天才: 12岁的时候Aaron就创建了一个类似于Wikipedia式的网站(那时还没有Wiki

软考历程(4)——安全问题之病毒

软考中关于病毒的考查很多,我总结了一些病毒的基本知识,并把近几年的考题分析了一下,共所有备考的童鞋们参考~~ [2011年 11月真题 7] 利用( 7)可以获取某FTP服务器中是否存在可写目录的信息. (7)A. 防火墙系统  B.漏洞扫描系统 C. 入侵检测系统 D. 病毒防御系统 分析: 漏洞扫描系统是用来自动检测远程或本地主机安全漏洞的程序.安全漏洞通常指硬件.软件.协议的具体实现或系统安全策略方面存在的安全缺陷.FTP服务器中是不允许存在可写目录的,所以存在可写目录的信息是一个安全漏洞

游戏中的“战争黑雾”和现实中的程序员处境(转)

当还是个少年的时候,我记得经常会玩一些即时战略游戏像X-COM, Civilization, 红警之类的. 这些游戏使用一种被称作“战争迷雾”的机制.当玩家开始游戏的时候,他们被笼罩在一片黑暗中,而地图隐藏其中.唯一可以看到你周遭情形的方法就是探索.当你移动的时候,越来越多的地图就会展开在你面前. 这将玩家置于一种策略上的不利之处:他们不能看到附近的危险,障碍或者机会.每次成功的前进都需要一点儿运气. 这种场景是不是听着很熟悉? “战争迷雾”是对当前程序员被要求工作情形的一个极好的比喻.他们被置

《资本的秘密》读感

赫尔南多·德·索托是谁? 赫尔南多·德·索托,秘鲁著名经济学家.目前是总部位于秘鲁利马市的自由与民主学会的主席.<经济学家>将其列为世界上两个最重要的“智囊团”之一.德·索托被<时代>和<福布斯>杂志称为世界上最具号召力的改革家之一,如今,他正在为全世界20多个国家和政府首脑制定所有权改革计划.德·索托的主要活动,是和自由与民主学会一起为亚洲.拉美和中东的贫困国家制定和推行资本形成计划. 什么是资本? 按照马克思主义政治经济学的观点,资本是一种可以带来剩余价值的价值.例