大数据爆炸时代,从细节预见未来

在信息爆炸的大数据时代,随着生活节奏变得越来越快,从全球经济的健康到击溃恐怖主义,都依靠预测的质量。我们所要做出预测的速度和数量都在不断增加。

心理学家、《专家的政治判断》一书的作者菲利普·泰特洛克对社会科学领域专家预测的准确性做了近20年的调查研究。然而他发现,专家的预测都非常不靠谱。“那些专家预测的结果几乎和黑猩猩随机投掷飞镖砸在可能的结果上没两样。” 泰特洛克幽默地形容道。

从 2011年开始,泰特洛克和妻子芭芭拉·梅拉斯及朋友唐·摩尔一起开始了一项名为“良好判断力”的项目研究,该项目得到美国情报高级研究项目的赞助。他们通过比赛的形式招募了数千名来自各行各业的参与者,用一系列问题来测试他们的预测能力,如“罗伯特·穆加贝在2011年9月30日是否任津巴布韦总统?” 或“2012年6月1日,希腊是否将成为欧盟一员?”参与者被要求估计每个事件发生的概率。这项实验的主要目的之一是观察这些预测者的能力,总结其中的规律,旨在发现预测政治或经济走向的新方法。

一年后,泰特洛克选出其中的2%—那些所谓的“超级预测者”,组成队伍完成剩下的实验。在第二年结束的时候,他们的预测精确度是专业分析师的4倍。和“良好判断力”参与者提供的预测结果不同,很多专家的预测实际只给出一个模糊的趋势分析,他们深谙言多必失的道理,也被自己的专业知识所禁锢,反而不能更加客观地看待数据、分析问题。

“我们发现那些业余的‘超级预测家’都具有思想开放、感性、自我批判、随性的特点。而那些预测不够准确的学究型专家的特点则是讲究逻辑,但缺乏变通意识。” 泰特洛克说,“真正成功的预测者不害怕改变自己的想法,他们勇于接受新的证据而抛弃自己旧的观点。”

统计学家、被人称为“大数据时代的巫师”的纳特·西尔弗,因2008年美国大选期间成功预测出49个州、2012年大选成功预测出50个州的选举结果而家喻户晓,让当时所有时政记者、政党顾问以及政治评论员哑口无言。他在《纽约时报》网站开辟的专栏让众多企业看到了大数据应用的真实性,以及大数据可视化、行业化的希望。

西尔弗说“数据本身是不能为自己代言的,我们经常是带着偏差的思想、个人兴趣的情况开展数据分析,我们必须知道在你所接收到的信息和你知道的信息之间是存在巨大鸿沟的。但这正是那些专家不愿意承认的事实。”

相比而言,西尔弗认为从民众调查得来的建模数据更可靠,因为没有经过媒体的渲染,直接到达他手中的民意信息更真实。

在大数据爆炸的时代,如何利用民间集体智慧来预测至关重要。真正优秀的预测者会用概率的方法思考问题,他们谦虚而且勤恳,能清楚地区分什么是不可预测的、什么是可预测的,他们注重能带领他们接近真相的成百上千个小细节,能辨识出什么是噪声、什么是信号。最终,泰特洛克团队希望这些发现可以帮助改变政府的决定。“这不是关于预言的事,而是关于精确度的事。”他说,“我们希望提高预言的情报真实性。”

成为超级预测家

1.对比相当重要,使用相关的对比参数作为起点。

2.回顾过往的历史潮流会有帮助,除非你能强烈地感受到这股潮流将逆袭历史规律。

3.专家们的种种意见往往针锋相对、各执一词,甚至自相矛盾,看看他们是怎么说的,然后选择一个中立的立场。

4.当需要用建模数据来进行预测时,不要排斥用数学模型。

5.不要让自己内心的愿望影响你的预测判断,不要在新证据面前固执己见,摈除预测中的偏见性。

时间: 2024-08-10 17:19:45

大数据爆炸时代,从细节预见未来的相关文章

蔡先生论道大数据之十三:预测企业未来

每次技术变革企业包括个人都需要做出适应,现在我们处于新一轮实际革命的时代节点上,从小数据时代到大数据时代的前叶. 那么企业面对大数据需要做出什么样的变革呢? 又存在什么样的挑战呢? 首先, 决策方式的改变,传统运作管理在变成大数据管理,越来越多的传统决策在变成基于数据分析的决策.其次,企业不仅要关心内部信息整合,比如CRM\ERP 还要关心外部数据比如用户评论\口碑\商誉\留言等,现在出现的新的趋势就是通过内部和外部的数据整合来决定企业的管理决策.最后,过去企业关心能够创造什么价值,是生产电视机

大数据云时代 游戏分析存在4大误区

最近几年,大数据这个词的火爆以及大数据技术的迅速发展,数据分析和数据挖掘的工作得到越来越多企业的重视,特别是在游戏行业,越来越多关于数 据的分析容和观点也井喷式提出,“数据驱动下的精细化运营”,“玩家群体的定量研究”,“移动游戏数据分析体系”等等概念的提出,可以看出游戏的研发和运 营过程中,对数据分析的需求是无穷无尽的,相应的,对数据分析的讨论也是各抒己见.而盲目过度依赖数据,或者主观的解读数据,带来的损失则是无法估计的. 以下,我将结合自己的工作经历,阐述以下数据指标会骗人和游戏数据分析中的几

大数据信息时代,如何防止数据泄露,大数据防泄漏解决方案

随着大数据时代的到来,数据已经成为与物质资产和人力资本同样重要的基础生产要素,大数据正在重塑世界新格局. 伴随着互联网时代频繁上演的数据泄露事件,不仅给企业及个人带来了一定的危机,同时也对国家造成了一定的损失,数据信息安全也愈演愈烈,那么,大数据时代,[数据信息安全]应该何去何从? 为什么说数据信息安全越来越重要?国家对数据信息安全这块关注度也逐步提高,例如,数据保护相关的法律法规的出台,确保数据信息安全,由此可见,数据安全地位的凸显. 导致数据泄露的途径有哪些?(1)通过U盘.移动硬盘.QQ.

大数据的处理决定企业的未来

灵玖认为,在“互联网+”时代,企业在运营过程中产生的大量数据,已经成为企业的核心组成部分,将属于企业的核心资产. “互联网+”时代的到来,大数据已经慢慢的产生了巨大的影响力,并且对我们的企业和群众的生活方式带来了深刻的影响.目前, 企业在运营过程中,数据量在以每年40%-60%速度增长.在产生大量数据的同时,企业如何充分的利用大数据技术挖掘用户习惯和分析信息,这将成为企业创新商业模式的基础,只有充分利用了大数据所挖掘出来的信息,才能形成企业企业强大的竞争力.现在越来越多的企业开始重视大数据,借助

信息大爆炸后的大数据残局,如何收拾?

随着云计算在2008年前后的兴起,DevOps开发者文化盛行一时,加上近年来企业加速向互联网转型,造成开发者文件激增.云计算又促使了商业模式的巨大变革,大量的公司并购.合并.裁员以及创业公司的兴起,导致人员流动加剧."遗留"数据暴涨.此外,随着智能手机的兴起,视频与图像文件的爆发,也成为企业的沉重负担. 一份由信息管理解决方案商VeritasTechnologies日前发布的公益性报告<数据基因指数>(DataGenomics Index)称,开发者文件是当前全球企业数据环

预见未来—— 互联网大数据应用 商业计划书

内容说明: 本商业计划书是我去年时写的,比较粗浅. 但一文一图都是自己花了时间整理出来的,也是份劳动成果,现分享给大家. 粗陋简文,不当之处,请多指教! 互联网大数据应用商业计划书_v1.3.pdf   pdf版下载地址: http://ebigdata.net/bigdata.pdf 注:未经本人同意,禁止转载:联系作者:程序猿小伍 [email protected] 第1章 背景介绍 1.1. 大数据标签 一分钟内,微博推特上新发的数据量超过10万. 截至2015年6月,我国网民规模达6.6

数据为王的时代-----大数据

自2012年至今,大数据(bigdata)一词越来越多地被提及,人们用它来描述和定义信息爆炸时代产生的海量数据,并命名与之相关的技术发展与创新. 它已经上过<纽约时报><华尔街日报>的专栏封面,进入美国白宫官网的新闻,现身在国内一些互联网主题的讲座沙龙中,甚至被嗅觉灵敏的证券公司等写进了投 资推荐报告. 以往我们对于大数据的印象可以用"神秘"来描述,但实际上,数据的运用已经涉及到我们生活的方方面面.近期,人工智能AlphaGo五局四胜打败世界 冠军李世石的事件,

在大数据时代,你需要这样思考

维克托?迈尔?舍恩伯格和肯尼斯?库克耶在<大数据时代>中告诉我们大数据的4V特点,即Volume(大量).Velocity(高速). Variety(多样).Veracity(真实).相比小数据,大数据一定是复杂的.然而,复杂性对于我们来说,绝对是一个机会而不应是一个问题.面对 大数据时代的扑面而来,如何拥抱大数据,从思考方式的转变开始. 从“基于预设的结构化数据库”到“无需预设的非关系型数据库” 小数据时代,我们对于数据的存储与检索一直依赖于分类法和索引法,分类和索引是一种清晰获取数据的机制

大数据时代,市场对企业级云存储的需求更加迫切

随着移动互联网的迅速发展,智能终端.可穿戴设备.智能家居.物联网以及基因测序正在快速普及.企业和用户每天接触的数据吞吐量呈现出指数级的增长趋势,我国社会正在步入大数据爆炸的时代. 大数据时代降临的今天,个人云存储服务早已迈向免费时代,而中国各行各业的互联网化与现实世界数据化的趋势,计算和应用都更加需要集中化,使得市场对企业级别云存储的需求更加迫切. 企业级数据的大爆发 IBM商业研究院与牛津大学的合作调研研究报告称,整个人类文明所获得的全部数据中,有 90%是过去两年内产生的.而到了 2020