大数据运营之孕育:服务过程设计,卓有成效的管理者

【本文摘自:李福东《大数据运营》3.6?,了解更多请关注微信公号:李福东频道

编制按

大数据服务过程包括:服务目录管理、容量管理、可用性管理、连续性管理、服务等级管理、信息安全管理、供应商管理等。

正文

在设计方法方面,大数据服务与支撑企业运营的服务既存在区别,又存在联系。不同之处是:大数据服务的设计主要以“数据”为参考点,“数据”类型越多、越丰富、越新鲜,则越有助于设计好的服务;两者的共同点是:大数据服务归根结底还是为企业运营服务的,是为了提升企业在建设、市场营销、产品销售、客户服务、企业管理等方面的能力。

大数据服务在设计阶段的过程包括:服务目录管理、容量管理、可用性管理、服务等级管理、信息安全管理、供应商管理等。

1.1.1 大数据服务目录管理

服务目录相当于饭店里点菜的菜单,用户可以通过服务目录可以看到有哪些服务,管理者也可以通过服务查看服务所依赖的资源,进而可以算出服务的成本效益。

随着大数据服务数量的增多,需要对其进行分级分类管理,以便能够快速地检索和定位大数据服务。同样,大数据服务也会不断优化完善的,因此需要对大数据服务增加版本标签的方式予以区分。

大数据服务目录可以按照大数据服务支撑的业务应用进行分类组织,比如一级大数据服务可以分为投资建设类、市场经营类、资源运营类、行政综合类和企业管理类。可以在一级基础上进一步细分,比如市场经营类可以细分为市场营销、销售、客户服务和计费收费。

按照这种分类方式,可以明确大数据服务支撑的业务应用所在的位置,可以让使用者更高效地找到大数据服务。比如,某大数据服务的目标就是为支持企业的网络规划设计,那么就应当在投资建设类中查找满足这一要求的大数据服务。

1.1.2 大数据服务容量管理

容量是组织的IT资源提供服务能力的吞吐量。IT资源所提供的容量衡量指标包括支持的最大并发用户数,最大在线用户数,服务器最大计算能力,最大存储空间,最大网络出口带宽等。

容量管理不仅对于IT服务设计重要,对于大数据服务设计仍然非常重要。大数据服务通常以三种形式提供,不同类型的大数据服务对于容量的需求是不同的。

第一类是支持操作决策的大数据服务,这样的大数据服务需要嵌入到生产型过程中,用户在使用生产型应用的过程中同样会调用大数据服务,因此要求大数据服务能够提供保证业务连续性的能力。这种类型的大数据服务与面向操作的事务型应用对于容量的需求类似,因此对该类大数据服务进行容量设计时,可以把其当作事务型服务看待。

第二类大数据服务属于统计分析型,该类大数据服务更多是为了满足企业中层管理人员统计某个时间段的数据,比如统计某个季度的产品销售数据、某个年度的现金流量等,辅助管理人员发现生产经营中存在的问题。由于这样的大数据服务并不嵌入到生产型应用之中,因此对于实时性要求没有那么高,对该类大数据服务进行容量设计时,主要考虑特定时间段的容量需求,比如月初月末。

第三类大数据服务主要面向企业的高层战略管理人员,比如企业的总经理、战略规划师等,这样的人员通常关注半年以上的中长期规划,需要借助大数据服务掌握市场情况、与竞争对手之间的差距等。这样的大数据服务对于响应时间通常要求不高,更关注于数据背后隐藏的规律,设计重点为决策模型,由于该类大数据服务往往需要以多年的历史数据为分析基础,因此可以考虑采用基于云架构的基础设施,以便弹性地适应不断增长的支撑能力需求。

1.1.3 大数据服务供应商管理

在大数据时代,数据成为企业的核心资产,而由于社会的专业化分工,数据也势必分散在不同的企业之中。大数据服务与企业其他原材料一样,如果不能保证及时准确的提供,将会降低大数据服务的能力。可见,对于大数据服务的供应商进行有效管理同样非常重要。

企业引入大数据服务与企业引入生产型服务一样,需要进行有效的管理。比如大数据服务供应商的准入和退出管理、服务质量管理、服务绩效管理等。供应商管理的目的是企业能够及时、有效地获取到满足要求的大数据服务,包括数据提供的时效性、数据质量等。

供应商的准入管理主要对供应商大数据服务提供能力的要求,降低大数据服务提供风险,企业可以通过与供应商签署大数据服务供应合同,从法律上保证因供应商不能按照要求提供服务带来的损失,降低企业生产和经营风险。通过定期对供应商提供的大数据服务进行考核评价作为大数据服务是否退出的依据。

1.1.4 大数据服务安全管理

我们将大数据看做企业核心资产的同时,也就意味着数据在企业中有着非同一般的价值和作用。此外,大数据还有不同于企业其他资产的独特性,比如企业的客户数据会涉及个人或者企业的隐私,可能会涉及企业的商业秘密。

为了保证大数据服务的安全性,需要从以下三个方面做起。

第一是保证数据不会被非法获取,企业可以通过权限控制机制实现认证和授权。

第二是当企业或个人使用数据时,要进行数据使用记录,保留“痕迹”,为审计工作做好准备。

第三是数据的对外提供采用匿名或者统计数据的方式,保证数据使用方不会看到真实的个体数据,如果确实需要则可以采用审批和合约的方式,在法律制度对数据予以保护,要严惩违法者。

1.1.5 大数据服务服务等级管理

服务等级是大数据服务的用户和大数据服务的提供者之间的共同约定,大数据服务的提供者需要按照约定的服务等级来提供服务。

当大数据服务提供方并没有按照约定的服务等级提供服务时,需要进行服务能力提升,以保证按照约定的服务等级提供服务。

比如,服务等级中约定用户从提交大数据服务请求到服务响应的时间为3秒钟以内,如果用户实际使用过程中没有满足这样的服务等级要求,大数据服务提供方则需要确认信息系统的容量设计是否存在问题。

如果存在问题,则可以通过扩容大数据服务基础设施容量的方式来满足性能要求。当然,在大数据服务提供方没有为用户提供相应等级的服务时,大数据服务提供方应当给予使用方一定的经济补偿。

服务等级除了在系统响应性能方面的要求外,主要还是大数据服务提供的数据质量是否能够满足要求。例如,数据完整性和数据准确性应当保证超过合同约定的百分比。应当预先建立双方都能认可的数据质量验证方法。

1.1.6 大数据服务可用性管理

服务的可用性直接关系到用户的体验。如果用户体验好,则会提高用户的办事效率,反之则有可能导致用户的流失并减少企业收入,可见可用性管理是非常重要的。

大数据服务分为三类:嵌入到生产过程中的服务、提供决策参考的服务以及提供趋势预测的服务,以上三类大数据服务对于可用性的要求是有差别的。

对于嵌入到生产过程中的大数据服务,需要保证高可用性,否则会因为无法及时做出决策而影响企业的生产经营,比如某银行的贷款业务流程中集成了信用评估服务。而信用评估服务就是一个大数据服务,只有当信用评估大数据服务输出客户的风险敞口后,才能确定是否能够为客户提供贷款以及贷款额度,如果信用评估大数据服务不可用,则会延长用户获得贷款的时间,从而降低银行贷款业务的办理效率,甚至导致客户的流失。

比较而言,提供决策参考的大数据服务和提供趋势预测的大数据服务,对于响应的实时性要求相对较低,因此对大数据服务的可用性要求相对也较低。当然,它们对于可用性的要求也需要根据具体情况来判断,如果企业应付突发和紧急情况,这时候对以上两类大数据服务的可用性要求也是非常高的,如果大数据服务不可用,则会为企业带来很大的损失,原因是大数据服务的不可用影响到组织的决策效率,错失了调整经营策略的好时机。

可见,大数据服务可用性对于企业的生产经营都是非常重要的,需要通过可用性管理的方法和手段来保证大数据服务具有较高的可用性。

实现大数据服务高可用性的方法分为两种类型:被动型和主动型。

被动型方法是要求系统对于大数据服务的运行情况进行实时监控,根据监控结果进行度量和分析,并通过报表形式展现分析结果,根据分析结果来定位和解决影响大数据服务可用性的故障点。

主动型方法是采集用户使用和系统运行数据进行主动分析,预测可能影响大数据服务可用性相关的问题,提前优化和完善,防患于未然。

1.1.7 大数据服务连续性管理

顾名思义,服务连续性管理就是保证服务不间断。对于面操作的事务型应用,服务的连续性是服务质量的重要考量指标,当服务出现故障后应当尽快发现和解决问题,服务恢复时间的长短体现了服务连续性管理水平的高低。

对于大数据服务而言,与生产流程结合紧密的大数据服务的服务连续性是需要重点考虑的类型。对于其他类型的大数据服务,应该重点保障数据采集服务的连续性,因为如果数据采集失败就意味着大数据服务依赖的数据样本减少,进而影响到数据分析的结果。

作者简介

李福东,资深大数据和信息化专家,培训师,《大数据运营》著作者,现为北京某高科技公司CEO,拥有20年电信、金融、互联网等跨行业工作经验,长期致力于企业架构、大数据、人工智能、区块链、虚拟现实、数字化转型等创新与实践。

了解更多最新干货,请扫码加入本文作者知识星球(数智萤火虫),您将至少获得:

1、问题解答。72小时内答复数字科技相关问题。

2、精品文章。每周至少分享一篇原创精编长文。

3、精华PPT。最新培训、公开课PPT干货分享。

4、精美礼物。赠送小礼品、红包、作者签名书。

原文地址:https://blog.51cto.com/lifudong/2472872

时间: 2024-07-30 02:52:28

大数据运营之孕育:服务过程设计,卓有成效的管理者的相关文章

大数据运营之孕育:分析处理系统容量设计方法

[本文摘自:李福东<大数据运营>3.5.1.2,了解更多,请关注微信公号:李福东频道] 编者按 大数据服务通常要经过数据ETL.数据存储.数据分析.数据展示.数据开放的过程,因此在计算能力.存储能力以及网络能力的估算上也有自身的特点. 正文 与事务处理应用相比,大数据服务属于分析处理应用,由于两者的数据处理特点不同,因此容量估算方法也有一定的区别. 大数据服务通常要经过数据ETL.数据存储.数据分析.数据展示.数据开放的过程,因此在计算能力.存储能力以及网络能力的估算上也有自身的特点. 大数据

大数据运营之孕育小结局:凡事预则立,不预则废

[文摘自:李福东<大数据运营>第3章内容回顾?,了解更多请关注微信公号:李福东频道] 编者按 "孕育"意味着埋下一颗希望的种子,要想让这个"种子"满足预期要求,必须从全局和长远考虑,对于设计大数据服务这颗高科技"种子",还应当具备正确的思维方式,具备面向服务.面向过程.全生命周期.数据即资产的观念,将大数据作为服务或者产品来对待,以价值创造为衡量大数据服务的原则,整合企业内部及社会数据,充分挖掘大数据的潜力. 文章正文 不同于面向操作

大数据运营-服务型企业架构新思维

目前市面上关于大数据的图书主要分为两类:一类主要讲大数据对社会生活的影响,属于大数据科普书,读一读可以增强对大数据的感性认识:另一类则属于大数据专业技术书,主要讲大数据相关技术,可以帮助开发出大数据应用. 本书既不是泛泛的谈大数据的重要性,也不深入专业技术细节,而是从业务和企业发展战略出发,运用系统化和全生命周期管理思维,给出大数据从需求到落地的整体解决方案.犹如个人的修齐治平,在大数据时代,企业要想得以生存和发展,同样需要经历筑巢.联姻.孕育.分娩.培育以及腾飞的6个发展阶段. 在筑巢阶段,企

大数据运营之数据治理

数据治理包括:隐私.安全.合规性3个方面. 大数据价值创造的前提和基础是企业自身的数据以及全社会开放的数据,当数据开放为社会带来好处的同时,也同时因此了隐私侵犯问题.隐私是社会赋予个人或者企业的权利,隐私权受到法律的保护,因此,企业在利用大数据的同时,要首先考虑大数据应用是否会侵犯他人或者组织的隐私. 企业可以多种方式来解决隐私触犯问题. 对于企业向内部人员提供的大数据服务,可以通过数据权限保证隐私数据不被非法获取,如果企业内部用户具有获取隐私数据的权限,要进行数据使用行为的记录和跟踪.例如,电

大数据运营之数据分析

数据分析过程包括:数据建模.大数据处理.告警与触发.报告等. 从数据处理的实时性要求角度看,大数据分析可以分为批量和流式两种数据处理方式.批量处理主要适合于实时性要求不高的分析型应用,而流式处理主要适用于实时性要求高的在线分析应用. 批量处理方式主要适用于大规模离线数据的分析处理,比如企业周期性统计报表,可以采样批量处理方式.对企业大规模历史生产经营数据进行批量处理,分析结果可以用于制定企业发展战略,对于分析结果的实时性要求不高. 流式处理方式有许多应用场景,比如客户浏览网页时,企业可以实施实时

大数据运营之渠道数据模型设计

渠道是企业将产品和服务交付给客户的一种手段.渠道可以整合各种产品和服务,在产品日益同质化的今天,渠道在社会中的重要性越来越突出. 渠道在产品和服务的提供方和消费方之间的作用如图3-4-5所示: 图3-4-5渠道是连接客户与产品/服务的桥梁和纽带 按产权归属,可以将渠道分为自有渠道和社会渠道:按照存在形态,可以将渠道分为实体渠道和电子渠道. 企业的渠道服务体系如图3-4-6所示: 图3-4-6企业渠道服务体系示例 电子渠道可以降低产品和服务交付成本,提供客户获取产品和服务的便捷性,在互联网发达的今

小数据大道理:新书《大数据运营》众筹启示

2015年7月,我的***作<大数据运营>在众筹网发起30天的图书预售活动,筹资金额5000元,从项目发起的两天半时间,即周五下午到周日晚上,就超额完成了预定目标,非常的震撼.最终,总共得到102名支持者的支持,除了两位无私支持者一位,恰好是100为获得实物回报的支持者,总筹资金额7999元,超额完成了预定目标. 通过众筹网的图书推广活动,也获取到支持者的订单数据,具体包括下单时间.配送地点.购书数量.购书金额.与笔者的社会关系等.由于只有102位支持者,所以订单数据量很小,所有就不能称之为&

《大数据运营》读书分享会活动

本周四(7.5)20:00-21:00,我与大家在线分享<大数据运营>图书的精要内容,同时植入区块链与大数据融合创新.互联网与区块链思维等新的知识点,欢迎大家关注.交流. 新增知识点之一:[区块链与大数据融合创新思考]大数据是生产资料,是新能源,但是大数据行业最大的问题和困难是:组织之间的数据难以流通和共享,如果这一问题得不到解决,数据就难以释放能量并创造更大的价值.数据难以流通和共享的主要原因是数据的开放可能会触犯个人隐私或者引发安全问题,也就是说当前还没有一种很好的办法解决由数据开放引起的

大数据:Hadoop(HDFS 的设计思路、设计目标、架构、副本机制、副本存放策略)

一.HDFS 的设计思路 1)思路 切分数据,并进行多副本存储: 2)如果文件只以多副本进行存储,而不进行切分,会有什么问题 缺点 不管文件多大,都存储在一个节点上,在进行数据处理的时候很难进行并行处理,节点可能成为网络瓶颈,很难进行大数据的处理: 存储负载很难均衡,每个节点的利用率很低: 二.HDFS 的设计目标 Hadoop Distributed File System(HDFS):源于Google 的 GFS 论文: 设计目标 分布式存储:根据需要,水平横向增加节点: 运行在普通廉价的硬