黑天鹅与大数据

摘要 : 人类不知道的远远比知道的更有意义。历史永远不是线性发展,每一次跳跃前行中都有「黑天鹅」的身影。这就是「黑天鹅事件」要告诉我们的真相。

上一篇文章里引用了「黑天鹅事件」这么个高贵冷艳的词汇,惹得众多读者发来讯息,让我讲讲黑天鹅的事。今天给大家简单说一点我对黑天鹅事件和大数据的认识。

如果你像很多爱读书的人一样,比如我,就会知道「黑天鹅」并不是什么新词,这个词源于澳大利亚的黑天 鹅。十七世纪的欧洲人认为所有的天鹅都是白色的,因为他们从来没有见过其他颜色的天鹅,当然,我到现在也没见过其他颜色的天鹅。到了十八世纪初,欧洲人远 渡重洋来到澳洲,一上岸就惊奇的发现,居然有的天鹅是黑色(shai)儿的!欧洲人吓尿了,因为他们之前那么相信自己的判断,认为世上只有白天鹅,其坚信 的程度,和我们小时候赌咒发誓二十一世纪共产主义一定要实现,是一样一样的。残酷的事实让欧洲人的信念土崩瓦解,他们跑回老家奔走相告:妈妈,原来世界上 也有黑天鹅啊。史称「黑天鹅事件」。

黑天鹅的出现预示着,世界上永远存在不可预测的重大和罕见事件,意料之外,一旦出现却有可能改变一切。 无论你去过多少地方,观察过多少只白天鹅,一只黑天鹅的出现就能让你之前所有的推理和结论全部失效。人类总是过于相信自己的经验,希望自己的判断、决定和 计划能如期而至,但是现实总是让我们手足无措。无论是泰坦尼克号的沉没、第二次世界大战、9.11袭击、美国的次贷危机、互联网浪潮等等,都不是人为能够 预测出来的,但这些事件的发生,对人类历史发展的进程产生了重大的影响。

甚至普通人日常生活中的选择,也存在很多黑天鹅现象,我以前在微博写过一句话:我有两个朋友,一个坚韧 不拔,对公司不抛弃不放弃,十几年过去了,一路从程序员成长为技术副总裁,然后公司因为一个突如其来的财务丑闻倒闭了……另一个朋友总是在选择中跳槽,在 跳槽中选择,最后在一家公司工作了两年后,公司上市了,丫还去纳斯达克敲了钟!大家可以感受一下,然后静下心来想一想,你所生活过的这十几年,或几十年, 哪些日子是在计划中度过了?

当然,很多人会说我们现在有了大数据相关的技术,我们的信息浩如烟海,如果说过去的数据用筐装就够了, 现在得用列车和舰艇运输,我们用千百万台连接到一起的计算机对这些数据进行计算、加工和统计,难道还预测不出一两只黑天鹅来么?在自然界的物种领域,当世 的科技和讯息的传播几乎已经不会再犯十七世纪欧洲人的错误了,但是就「黑天鹅事件」来说,依然难以预测。

讲一个猪的故事。有一头不在风口的猪,自打出世以来就在猪圈这样一个世外桃源生活,每天会来一些站立行 走的生物,时不时扔一些好吃的进来,小猪觉得日子惬意极了。他高兴了就去泥里打滚,忧伤了就趴在猪圈的护栏上看夕阳西下,春去秋来,岁月不争。经过数百天 的大数据分析,小猪觉得日子会一直这样过下去,直到他从小猪长成了肥猪……在春节前的一个下午,一次血腥的杀戮改变了猪的信念:尼玛大数据都是骗人的 啊……惨叫嘎然而止。

无论是你的个人收入、图书销量、知名度、Google 搜索量、血压、牙患、股票价格,都有可能是「黑天鹅事件」,它们在过去的几百天之内只发生了微小的变化,并且具备一定的趋势,你以为事情会一直这样发展下 去了,就像太阳每天从东边升起,西边坠落一样自然,但是到了1001天,砰的一声,一个过去从未有过的巨大变化发生了!

泰坦尼克号的船长曾经说过:

根据我所有的经验,我没有遇到任何值得一提的事故。我的整个海上生涯只见过一次遇险的船只。我从未见过失事船只,从未处于失事的危险中,也从未陷入任何有可能演化为灾难的险境。

然后他就驾驶着当时全世界最为安全的巨轮泰坦尼克号出海了……

人类不知道的远远比知道的更有意义。历史永远不是线性发展,每一次跳跃前行中都有「黑天鹅」的身影。这就是「黑天鹅事件」要告诉我们的真相。

那么普通人如何面对「黑天鹅现象」呢?如果我说「他强任他强,清风抚山岗;他横由他横,明月照大江」,大家会不会点赞呢?料想是不会的,所以我的看法是:

1、保持独立的人格和思考,持续提升个人能力。在改变历史进程的「黑天鹅事件」中,个人的作用可能微乎 其微,但是在生活中就有用了。比如你早晨起了床,刷了牙,吃了早饭,为自己的梨形身材套上合身的西装并扎好领带,高高兴兴去上班,然后发现自己失业了。没 关系,哥一身是胆满腹经纶左右手都能编程,分分钟找到下家并薪资翻倍。

2、努力让自己的生活发生正面的「黑天鹅事件」,寻找报酬具有突破性的职业和工作,工作成果不受时间限制,也不是按件记酬。比如我,现在就寄希望成为图书销售百万的技术作家神马的……

3、通过反证接近真相。当所有人都认为某件事的发生是理所当然的,不要急着附和,往其他方向看一看想一想,不是有句老话嘛,我不能证明这件事是正确的,但我可以证明它是错误的。不是不让大家过马路,而是不要闭着眼睛过马路。

等等,说了半天,大数据是干嘛的?就目前数据计算能力,大数据主要应用于经营决策、智能推荐、定向营销、机器学习和人工智能等方面,至于预测「黑天鹅事件」?还是等失联的飞机找到再说吧。

《黑天鹅:如何应对不可预知的未来》的作者说过:历史和社会不是缓慢爬行的,而是在一步步地跳跃。它们从一个断层跃上另一个断层,其间极少有波折。而我们(以及历史学家)喜欢相信那些我们能够预测的小的逐步演变。我们只是一台巨大的回头看的机器。

认识到这一点,对大家的日常生活和未来发展会有帮助。

http://chijianqiang.baijia.baidu.com/article/24376

黑天鹅与大数据

时间: 2024-08-04 08:00:57

黑天鹅与大数据的相关文章

黑天鹅事件的背后

2016发了几件被称为黑天鹅的大事件: 1.英国脱欧了: 2.特朗普当选美国总统了: 3.朴槿惠遭弹劾被停职:   而我在看了<得到>专栏吴军老师发表的那篇<市场永远是对的>后,里面的一些观点值得深思. 在股票投资上,总有这样一些精英,他们建造了非常'完美'的预测模型,但是预测市场就是不准,于是他们说市场有问题.当然,真正的投资人知道,市场永远是正确的,要错也是你的模型错了.   当精英人士坚持认为他们没错,是国家错了.民众错了,这些人从来不检讨自己的鞋子有问题,老是从脚上找毛病的

你的旧船票能否搭上这艘巨轮?——解读近5年大数据产业发展规划

文|水手 本文出自:知乎专栏<帆软数据应用研究院>--数据干货&资讯集中地! 文章导读 一.大数据产业现状和挑战 二.2020年发展目标 三.实现目标的关键举措 四.<规划>对企业的启示 五.<规划>对个人的启示 自2015年党的十八届五中全会提出"实施国家大数据战略"以来,国家相关部门密集出台了多项大数据发展意见和方案,大数据政策从全面.总体规划逐渐向各大行业.各细分领域延伸,大数据发展也逐步从理论研究步入实际应用之路.在诸多的政策规划中,

塔勒布用期权实现“黑天鹅”传说

因“黑天鹅理论”而被人们称为“黑天鹅之父”的塔勒布最爱讲一个故事:18世纪以前,欧洲所有的人都确信天鹅是白色的,因为这是世代相传.耳闻目见的“真理”:没见过黑色天鹅,自然无法预计世上有黑天鹅这东西.直到澳洲黑天鹅被发现,才彻底打破了这个“真理”. 塔勒布如此强调于关注小概率事件,是由于他亲身经历的两件事情引起的. 出身于贵族家庭的塔勒布,童年时期生活幸福.然而内战的突然到来改变了这一切.塔勒布说,6个月的时间,使他从天堂一下子掉进了地狱. 而另一件事情的发生,使塔勒布更加确信了自己的观点.在塔勒

chinacloud大数据新闻

2015年大数据发展八大趋势   (0 篇回复) “数据很丰满,信息很骨感”:Sight Machine想用大数据的方法,打碎两者间的屏障   (0 篇回复) 百度携大数据"圈地"证券业 "BAT"开启互联网金融新战场   (0 篇回复) 码农的春天到了?   (0 篇回复) 浪潮大数据一体机出招 装备科研“最强大脑”   (0 篇回复) 方物软件承担国家“核高基”重大专项研发   (2 篇回复) 2013互联网大会透露的热点与新趋势   (1 篇回复) 大数据从幕

大数据产业

大数据的理念异常火爆,不仅仅是IT或者互联网人在谈大数据,搞金融.搞医疗.搞地产的......,人人都在谈大数据.但,大潮退后,裸泳的人自然要去遮羞,真正留下的企业才会成为大数据财富的拥有者.在国产大数据产业生态环境中,只有具备核心竞争能力的企业才能成为大数据产业链上的最后赢家.赛智时代的<2013年中国大数据产业链研究报告>试图找到答案. Dave Feinleib在大数据厂商生态图中比较清晰地划分了国际上主流的大数据研究.产品和服务厂商,大多数厂商的产品和技术都建立在Apache开源的Ha

大数据独角兽Palantir之核心技术探秘

Palantir源起 B2B大数据 企业级Google ▼ Palantir(中文名帕兰提尔,源于<指环王>中可穿越时空.洞悉世间一切的水晶球Palantír)被誉为硅谷最神秘的大数据独角兽企业,短短几年内跻身百亿俱乐部,成为全球估值排名第四的初创公司.它的主要客户只在美剧和好莱坞里出现,如美国联邦调查局(FBI).美国中央情报局(CIA).美国国家安全局(NSA).美国军队和各级反恐机构,当然还有如JPMorgan这样的华尔街金融大鳄等等.关于Palantir的传奇故事很多,CIA通过他家的

【fone思考】你的预算系统是否足以应对“黑天鹅事件”?

17世纪之前,西方人认为天鹅都是白色的,"黑天鹅"曾经是欧洲人言谈与写作中的惯用语,用来指不可能存在的事物,但当他们进入澳大利亚发现了黑天鹅,这个曾经不可动摇的信念被颠覆了.这就是"黑天鹅事件"的由来. "黑天鹅",指那些不可预测的重大稀有事件,在意料之外,却又改变一切. 2020年的开端,一场叫做"新冠肺炎"的黑天鹅事件突然爆发,数以万计的人身体健康受到严重威胁,为了减少接触,控制疫情扩散,许多城市地区都发布了延迟复工的通知

大数据时代的图表可视化利器——highcharts,D3和百度的echarts

还记得阿里巴巴那个令人澎湃激情的双十一吗?还记得淘宝生动形象地把你的的消费历程一一地展示给你看吗?还记得那些酷炫拽的it报告图表吗?在这个大数据越来越盛行的年代,怎样去表达一些用户的关系,人物的关联,甚至是事情的发展,都让我们有更多的表达方式.其中最简单直接,形象明了的就是用图表说明问题了. 如果在以前,要实现各种图表,可能很多人会选择flash.但是flash成本较高,图表多的时候很耗性能.后来越来越多的纯js框架出现,让大家有了更多的选择.所以接下来我想推荐几个不错的图表js框架给大家用.

网络安全标准与 “腾讯模式”背后的海量大数据及技术优势

针对腾讯反电信网络诈骗的系列技术产品和成果进行考察.交流座谈中,腾讯公司董事会主席兼CEO马化腾首次提出了反电信网络诈骗的"腾讯模式",依托现代网络安全技术与大数据能力,联合全行业伙伴,开放合作共享,职能联动互通,形成对抗黑色产业链的联合反诈骗生态闭环.值得一提的是,"腾讯模式"的思路在企业安全领域也有体现,其背后的安全大数据积累将通过腾讯云开放,促进各行业安全能力的提升. 安全标准是网络安全工作重中之重 "网络安全标准作为网络安全保障体系的重要组成部分,