云计算发展及性能规划

随着云计算技术的日趋成熟,世界范围的云计算应用也越来越广泛,并逐渐普及。亚马逊、微软、谷歌、salesforce、IBM、VMWare、SAP(这是一家德国公司,其他皆为美国公司)等世界顶级的云计算服务商都在不断地发展和充实着自己的云服务,立足于自己的优势服务—IaaS,PaaS或SaaS,然后兼而有之。

出于数据安全性等方面的考虑,目前中国没有允许这些外商独资企业在中国建立云数据中心提供云服务,但是可以提供技术给中国的企业来进行合作。比如世纪互联与微软合作提供Azure云服务,宁夏西部云计算基地有望提供亚马逊AWS云服务。这种合作的云服务只是采用了同样的技术,在数据上是隔离的。中国本土的云服务商比较大的有阿里、腾讯、新浪、盛大等,主要提供IaaS或PaaS。

作为一个新的技术,用户在考虑采用时必然有各种顾虑。首先是数据的安全性。安全性主要包括数据不丢失和不泄露这两部分。

“不丢失”靠的是各种备份及恢复机制。以阿里为例,其宣称对数据存储的持久性可达99.99999999%(十个9),这无疑要比一般用户自己建立的备份机制可靠得多。也要注意到,没有人能100%保证数据不丢失,事实上微软的sidekick和谷歌的Gmail历史上真实发生过小范围的云数据丢失。其中Gmail虽然最终通过多层备份机制从磁带恢复了数据,但部分用户数据恢复时间长达4天。所以,如果您的应用非常重要,您需要考虑附加额外的备份恢复机制来以防万一。

“不泄露”是用户对云服务最基本的要求。云服务商必须做出承诺,能否做到依赖于云服务商的技术和管理水平。事实上,云服务出现以前,各种数据泄露和黑客攻击事件就时有发生。从2006年AWS S3正式发布至今的8年时间里,我们看到各家服务商提供的“云”并不是导致类似泄露事故的原因所在。相比之下,更受关注的是偶尔发生的云宕机事件。云服务商也在不断发展和完善各种防网络攻击和数据加密等技术。可以肯定的是,无论用不用云,黑客和数据泄露事故将长期存在,天下无贼只是善良人们的梦想。因此,用户在选用云服务时需要对云服务商提供的加密等技术服务和管理有基本的了解。

在讨论云规划中的性能方面以前,让我们先缩小一下讨论的范围。我们主要基于IaaS公有云的云主机来讨论性能规划,PaaS、SaaS、私有云也可作参考。

也有些各种名称的云服务和下面的讨论关系不大,毕竟云计算至今没有一个唯一的定义。这其实一点也不奇怪,因为IT行业是一个快速发展的行业。快速发展就意味着不断变化,换一种说法就是“很不稳定”。每家厂家都在发展自己独特的产品和技术,每天都有创新发生。一些IT企业可能10年前还是市值领先的新星,10年后却被收购了。为了使各种软件之间方便交互、互相兼容,DMTF、SNIA等行业组织也发展出了OVF等一些规范。但是总的来说,标准化还是非常困难的。所以,用户需要在选用云服务时区分它们之间的不同,不同定语下的云可能完全没有关系。

任何IT系统都会有性能的需求。资源少了运行不起来或响应时间过长,资源多了浪费。所以需要先进行性能容量规划。对于打算使用公有云的用户来说,性能容量规划又会有所不同。

也许有人会说“云的资源是动态的,需要了就增加,不用了就减少,付费是按照使用量来进行的,所以不需要性能容量规划。”是这样吗?

貌似正确,但其实原因推不出这样的结论。待我慢慢道来…

首先我们要注意应用部署到云上以后,表现出的性能由三部分来决定:网络性能、应用特性和云主机性能。

用户使用云后,必然要通过WAN网络来访问应用系统。在购买网络服务时仅仅关注网络带宽(上行带宽和下行带宽)是不够的。网络延时也非常重要。受光速限制,距离每增加100Km延时增加约1ms。路由器等网络设备会增加延时,不同的网络设备延时不同。用常用的Ping命令即可看到延时大小。

也许有人觉得即使到200ms不过是0.2s,应用会感觉到吗?这要看应用的客户端程序(通常是使用者的浏览器)与服务器(在云上)需要交互几次来完成一个请求。以一个常见的网络游戏为例,游戏的参与者都会尽量选择那些ping值小(如20ms)的虚拟房间进入,然后选择发起者ping值也较小(如35ms)的进行参与。因为如果ping值较大(如150ms)就有可能进行起来“很卡”,无法正常进行。如果您没有玩过魔兽争霸之类的网游,也许可以和您的小孩或者年青的朋友聊一下,他们一定深有体会。

所以,在向电信运营商购买服务时,您需要在关心上/下行带宽的同时,明确网络延时,并保证服务质量QoS。通常,减少延时的手段是更换网络设备,替换掉延时长的路由器等。顺便提一下,为提高可用性,也为了降低IP网络性能波动对应用的影响,您也许应该同时购买两家电信运行商的线路,毕竟如果网络断了,一切云服务都不可访问了。

现在谈一下应用特性。应用是千差万别的,即使同是人事管理系统,每家公司都会有不同的流程和功能,而在不同模块下活动用户的比例差异也会影响到应用系统的表现。上面提到的处理一个请求时服务器与客户端程序交互次数就是一种应用特性。这些应用的特性也许需要针对云服务特点来优化。比如减少与客户端的交互次数。

每类应用对资源的需求和消耗都是不同的,有的应用对CPU要求更高,有的需要大内存作为cache,有的需要高IOPS来支撑随机数据访问,有的需要高MB/s来批量吞吐数据。不同的应用对响应时间的期望也是不同的。一般对于在线的会话,平均3秒以内的响应时间是可以接受的,当然如果能做到1秒以内就非常好了。对于财务月结或者一些BI报表分析,也许3-5小时,甚至更长的处理时间都是可以接受的。

所以,用户在规划云服务时需要对自己的应用特性进行分析,如果有条件的话,进行相应的压力测试并针对云的特点进行优化就更好了。

现在谈一下最后一点“云主机性能”。真正的云主机的确是按使用收费,动态扩展的。如果您是类似初创企业的小应用,用户数很少,那的确不用花费精力去规划云主机的性能。但是,如果您的应用是企业级的关键应用,或者将来可能成为关键应用,下面这些信息相信对您还是有用的。

云的动态扩展是有技术局限性的。经常可以看到类似的描述“云计算是将计算资源聚合调度,以服务的形式提供给用户”。这话本身没有问题,但是如果您理解成您原来运行在1台server上的sql server单机版应用可以直接部署到云中,并自动扩展到使用超过1台物理服务器的资源的话,那就错了。云的基础是虚拟化技术。现有的虚拟化技术都是能够将单个server虚拟出多个虚拟机,但是不能将多台server聚合成1个虚拟机。现在的聚合应用都是通过分布式软件(如Hadoop Mapreduce)来实现的,而这需要改写应用软件,而且不同类型的应用改写难度也不一样。如果您购买的某款软件没有并发版本,您恐怕难以要求厂家专门为您做一个。这已经超出了IaaS云的范围。IaaS管理大量服务器,并按预定策略将某个虚拟机部署在某台服务器上,通过预定策略来扩展甚至迁移这个虚拟机。如果开始时部署在一台小Server上,系统压力上升时如果要满足扩展需求,就要动态迁移到更大的Server上,这必然会导致迁移过程中的性能问题,同时也增加了风险和云管理的开销。所以,预估应用中每个虚拟机需要的最大CPU需求是完全有必要的。

关于单机内的资源动态调整,与CPU动态增减较为容易相比,内存的增减就比较困难了。应用一般需要更改运行参数,甚至重启才能使用增加的内存。而减少内存更加难以实现,往往需要应用释放后才能慢慢减下来。所以,我建议尽量将内存需求估算准确,并基本固定。

对于磁盘IO方面,不同的应用差别很大。如果是Web应用,往往不需要自身有共享存储。而对于数据库来说,存储的冗余和高性能就是必须的了。一般企业级的应用在上到云中时,总是在购买云主机的同时也要购买高性能存储云服务。他们之间的IO性能(IOPS和MB/s)也是用户需要重点关心的。毕竟,数据为王嘛,如果数据堵在路上,再快的CPU也只有等待。

综上所述,规划很有必要,特别是对关键的企业级应用,更是如此。“Fail to plan is planning to failure.”

时间: 2024-11-03 20:57:38

云计算发展及性能规划的相关文章

云计算发展与BPaaS构建企业Private PaaS分析

1. 云计算发展概述 云计算的发展[2],追根溯源是从并行计算.分布式计算.网格计算.虚拟化.SaaS.SOA 等技术混合演进的结果. 1959年6月,ChristopherStrachey 发表虚拟化论文,虚拟化是今天云计算基础架构的基石. 1996年,网格计算Globus 开源网格平台起步,网格计算是聚合分散资源,支持大型集中式应用,从技术层面面向科研计算. 2000年,SaaS 兴起. 2004年,Google 发布MapReduce 论文.Hadoop 就是Google 集群系统的一个开

云计算:为什么说存储是云计算发展瓶颈之一?虚拟化是解决之道!

共享存储模型 文件/记录层(File/Record Layer) 提供存储资源访问方法,包括:文件系统,数据库,缓存等 将用户视图的数据单元(文件/记录/对象)保存到存储空间,并记录映射关系,负责维护命名空间.存储空间分配 性能优化,分布式系统集群管理与控制 块层(Block Layer):支持文件/记录层 存储设备:磁盘.磁带.固态硬盘等,用来存储数据 提供块聚合管理:实现存储网络聚合,物理卷聚合,镜像冗余(RAID-n)等功能 负责缓存管理 包括DAS.NAS和SAN等不同存储模型 数据存储

[转帖]云计算发展白皮书:今年规模达1290亿元

云计算发展白皮书:今年规模达1290亿元 https://news.cnblogs.com/n/644301/ 作者:韩大鹏 10 月 17 日下午消息,近日,国务院发展研究中心发布了<中国云计算产业发展白皮书>.根据<白皮书>显示,2018 年,中国云计算产业规模达到 962.8 亿元,较 2017 年增长 39.2%,2019 年产业规模预计超过千亿,达到 1290.7 亿元,到 2021 年,产业规模将破 2000 亿元. <白皮书>指出,云计算为数字经济提供了核

消除数据安全隐患对云计算发展至关重要

云安全不是短期问题,云计算想要继续和长期发展,数据安全问题绝不容小视,本文的这些方法,究其根本,数据本源的安全防护是最重要的.所以在采用云技术的同时,采用具有针对性且能灵活应对的加密技术进行核心数据防护应是一个有效的选择. 云计算能够使用虚拟机完成业务集中化管理,因此多数企业选择云计算的初衷是节约运营成本.而云在发展的同时,围绕着它的安全环境却在不断发生变化.这对于云的安全关注点已从原来的端点安全,逐渐转移到了交付的应用程序.数据和用户体验上.这就要求我们在享有云提供的信息完整.开放.良好用户体

腾讯云从业者线上课程(一)--云计算发展历史

云计算发展历史 1.1自建机房 1.2传统IDC 1.3云计算 1.4云计算演进之路 原文地址:https://www.cnblogs.com/bk770466199/p/12283187.html

云计算发展与动态

         社交.移动.大数据及云计算是当今的创新趋势,位居过去五年 CIO 最关注的重要技术前五(Gartner 调查报告).企业应充分利用新兴技术进行商业模式创新,以形成独特的竞争优势.     私有云和公有云的采用正在迅速增长,横跨不同规模.行业.地区的不同组织.私有云采用明显高于公有云,但公有云的增长幅度则比私有云高.     同时,平台级服务比基础设施级服务更为流行.   企业将以不同的速度经历以下基本发展阶段,并且将会同时处于几个阶段,最终转移到混合云模型中,即单个应用可以横跨

最详细的程序员职业发展路线和规划

程序员的职业发展有几个选择:专注于技术,成为技术专家:转型到技术型销售.技术支持等:随着技术成长,从技术性管理到高级管理.这归根结底,都是以技术为基础.在扎实的技术基础上(高级软件工程师),如果有着比较强的抽象设计能力,又打算专注于技术开发,架构师是个好的选 择:如果性格更适合做管理,情商能力突出,技术型管理应该是下一步的方向.这种发展规划属于'瘸腿走路'的类型,各有侧重主攻发展的职业方向,也是目前一 般程序员普遍采用的发展路线规划.已经工作两年以上的程序员可以有几种基本的职业规划:技术专家.软

图解云计算发展历程

云计算作为作为一个新兴的技术时尚名词,正受到计算机软件和互联网技能人员及商业模式研究人员的高度追捧,他们百折不回地认为云计算能把他们带出创 新枯竭的互联网应用沙漠,并让他们跃升到同行中更高的岗位.他们视其为救命稻草,他们计划抓住云计算这根看起来模含糊糊的稻草,正是如此,云计算文章铺天 盖地,种种格局的研讨会此起彼伏,以致已经生长到以讹传讹.神乎其神.不能自拔的田地了.到底什么才是云计算呢?来看看下面这段对话吧! 最开始,人们使用算盘 后来,人们用电脑 再后来,人们有了网络 再后来,中国人口大爆炸

云计算发展历程的浅谈,学习Linux运维

云计算是一个提供便捷的通过网络访问一个可定制的IT资源共享池能力的按使用量付费的模式(IT资源包括网络,服务器,存储,应用,服务),这些资源能够快速部署,并只需要很少的管理工作或很少的服务供应商的交互. ×××老师简单地说:云计算是一种未来信息技术的一种主要架构,服务云+消费端.云端通过集中的资源提供各种服务,各种终端通过互联网那个接入使用,而不是原来各自维护自己的基础架构.通俗的理解是,云计算的"云"就是存在于互联网上的服务器集群上的资源,它包括硬件资源(服务器.存储器.CPU等)和