软件定义存储在大型数据中心的应用分析

历史经验一再表明,由技术进步推动的变革往往以超乎人们想象的速度和烈度发生。SDS软件定义存储作为新兴的技术,即使穷尽你所有想象,也难以预测其发展的速度有多快,影响的程度有多深远。面对新的变革和潮流,在追逐变化的同时,还需冷静思考可能带来的问题。SDS在数据中心的应用一定能提高性能和降低成本,并可控风险么?SDS会隐藏什么样的问题?

问题一、不能充分利用现有的基础架构

  数据中心是非常繁忙的,IT部门要同时接受从多个不同的应用系统发来的需求和数据任务并及时响应和处理。另外,IT专业人员的日常工作还需要维护高可用的基础架构和嵌入许多工作流程。

大多数的SDS解决方案都希望数据中心可以“完全投入”,即用SDS解决方案自带的基础架构和流程替换数据中心现有的存储硬件、基础架构和流程。他们通常希望数据中心摒弃共享式集中存储硬件,而支持商业化的超融合架构。

问题二、不能提供全面的数据服务

  许多SDS解决方案不能提供完整的数据服务功能性。举个简单的例子,许多SDS解决方案无法将数据复制到远程位置,因此无法创建数据的灾难恢复副本,甚至无法将数据迁移到SDS架构本身。

既然无法实现简单的数据复制,就应该提供某种数据迁移功能,以便将数据从旧的存储平台迁移到新的平台,否则就必须通过备份副本来恢复数据。

  许多两副本和三副本的解决方案也是在同一个数据中心内或同一POD里,跨数据中心的容灾几乎没有。(还有就是存储双活和仲裁,在这里提一下,不是广告。VSAN支持存储双活,还引入了WITNESS组件。其目的就是在必须做出可用性决策时(在Virtual SAN 群集中)充当打破平局组件,以避免裂脑行为并满足仲裁要求)

  对于SDS来说如果缺少完整可靠的数据服务能力则意味着采用这个SDS解决方案的客户仍然需要购买额外的存储系统来填补新的SDS解决方案所缺少的功能。

 问题三、不能很好的进行数据生命周期管理

  随着企业业务发展以及各种平台、系统的建立也意味着需要管理的数据量越来越庞大,资源维护成本越来越高,效率越来越低。那么面对企业对数据的不同时效、不同访问频率、不同重要性等要求,如何降低数据存储和使用维护成本,对不同数据进行生命周期管理是非常有必要的。

  结合业界的相关标准规范,对企业IT系统的数据进行必要的归类。目前根据系统的业务特点,比较流行的数据归类包括:生产交易型数据、服务支撑型数据与系统数据三部分。

  根据数据归类,不同类别的数据应匹配不同的数据存储策略。数据存储策略就是将不同的数据存放在指定的存储设备上。目前主要的存储设备主要分成在线存储、近线存储、离线归档存储,三种常用存储。

  在线存储又称工作级的存储,存储设备和所存储的数据时刻保持随时响应状态,可以实时读写的,可满足计算平台对数据访问的速度要求。一般在线存储设备通常为内置磁盘和高端磁盘阵列等磁盘设备,价格相对昂贵,性能最好;

  近线存储定位于在线存储和离线存储之间的应用,对性能要求相对来说并不高,但又提供相对较好的读取性能。近线存储策略一般采用中低端磁盘阵列设备,并辅以高压缩软件,满足快速读写等访问动作。

 离线归档存储是将不再经常使用的数据移到一个单独的存储设备来进行长期保存的过程,对涉及的数据进行离线存储,以备非常规查询等。企业里归档设备一般采用磁带库、光盘库,以及大容量低端磁盘阵列,价格相对低廉。

  对于软件定义存储SDS来说,目前还未充分考虑到数据生命周期的管理,对于冷热数据虽然也有存储区域上的区分,但基本都是拿闪盘来做缓存加速,还不能有效做到分级存储,来满足企业对于大量不同数据的精细化管理和生命周期管理。

问题四、缺少合理的计价模式

  SDS大部分按照容量包获得许可。许多软件还针对高级功能收取额外费用。这就造成了一个问题,因为大部分数据中心从来都不能确定自己合适的容量限点来充分利用容量打包价格的优势。例如,一个初级容量包可提供1-10TB的存储服务,更高一级的容量包则支持10-25TB。如果企业需要11TB存储容量怎么办?这就意味着企业为了支持多出的1TB的容量,必须升级到25TB的容量许可。

  大部分SDS解决方案都会忽视的另一项成本是:不支持现有基础架构和存储系统所产生的相关成本。许多这类SDS解决方案允许用户在相同的服务器上使用商用硬盘来提供计算(超融合),虽然这降低了未来的成本,但它要求用户购买闪存固态硬盘和硬盘驱动器安装到现有的服务器基础架构中。

软件定义存储的未来

  对于传统企业的大型数据中心来说,之前商用的中高端存储,都经历了大量生产环境和实践的检验,相对来说成熟稳定。而软件定义存储还未经历大量生产环境的检验和复杂业务场景的企业实践验证,还不够成熟完善。

但软件定义存储凭借深度融合软硬件的精简一体化架构,可将采用最新技术的更快速CPU、内存、闪存和磁盘的优越性发挥到极致。虽然SDS还有许多问题,但是不妨碍它的优秀。活在物理世界中的SAN终将被玩转虚拟世界的超融合的SDS架构所替代。SDS超融合架构,必将成为构筑现代化数据中心的新基石。

提问:

  Q1:SDS能达到企业级应用的标准吗?比如几个9之类的

  答:SDS的高可用性目前没有传统存储高,如果你做两个节点的插拔盘测试,你会发现高可靠性不像你想象的那样好。

 Q2:软件定义存储中是计算节点和存储节点分开好还是一起好?

答:看使用场景,合并在一起省节点省服务器,对计算能力和存储能力都有要求的适合合并。分开的话,适合大容量存储的,也包括一些离线存储的场景。

  Q3:SDS目前软件厂商除了VMware还有别的厂商吗?

  答:有SMARTX,EMC的SCALEIO 华为的FUSIONSTORAGE等,开源的还有CEPH!应该说这些产品各有千秋,每个都有自己的特点!

  Q4:软件定义存储与软件定义网络是否本质上一样的?

  答:思想本质一样,都是解耦,分离数据层面和控制层面。

时间: 2024-10-29 02:45:08

软件定义存储在大型数据中心的应用分析的相关文章

如何做好大型数据中心的运维

什么叫数据中心?维基百科给出的定义是"数据中心是一整套复杂的设施.它不仅仅包括计算机系统和其它与之配套的设备(例如通信和存储系统),还包含冗余的数据通信连接.环境控制设备.监控设备以及各种安全装置".在云大行其道的今天,随着数据中心建设规模的不断扩大,新技术的层出不穷,数据中心变得越来越复杂.大型数据中心往往是由很多规模庞大的集群系统组成,其运维工作需要具备方方面面的知识,包括硬件.网络.服务器.存储.安全以及业务上的东西,需要上下打通地去做运维工作. 当一个数据中心的规模非常大,面临

TWaver 3D应用于大型数据中心(续)

在2014年11月份,我们当时发了一篇有关TWaver HTML5 3D应用于大型数据中心的文章,该blog比较详细的描述一些常用的功能的实现方法,比如:动态添加机柜,告警,温度,湿度等相关的功能的具体实现.其实会用这些东西的话基本上可以使用我们的TWaver HTML5 3D来实现相关的应用了,可是在有些客户觉得这还不够“动态”,都是代码一下生成的,少了一些交互,前些天同事说要不再加点功能,让它更加“动”一些,所以今天我抽了个时间再接着来个“续”——动态的添加机柜,主机和告警.1.动态的添加机

大型数据中心内部路由选择:为何选择BGP而不是OSPF

大型数据中心fabric往往把BGP作为内部路由协议的原因:1.BGP比IGP具有更简单的状态机和数据库:2.BGP交换的是路由,直接命令,不需要运行算法(比如SPF)来计算路径:3.BGP支持逐跳流量工程:4.路由传播来说,BGP范围更小(对等体传播,OSPF需要链路状态泛洪),因此更稳定. IBGP和EBGP的选择:1.EBGP会话一般建立在BGP对等体的链路上,IBGP一般建立在BGP对等体的环回接口上:2.EBGP使用AS-path防止环路,IBGP在同一AS内,使用水平分割原则:默认从

为全球数据中心提供创新存储方案

为全球数据中心提供创新存储方案 -PMC公司副总裁兼存储事业部总经理Travis Karr于CCCC演讲实录- 本次演讲涉及几个方面的内容.首先是中国数据中心存储增长的源动力,另外就是全球其他地区的数据中心看到的共同发展趋势.依据这些趋势,进一步针对具体案例做出详细分析与阐述.最后就PMC在全球数据中心创新技术研发方面的概况做一个简短介绍. 凭借巨大的人口受众和极其强有力的经济发展,加上互联网领域的创新,中国其实已经在大数据时代占据了独领风骚的地位.在存储领域,中国的存储销售量甚至已经逐渐超越美

什么是真正的软件定义数据中心?

目前,IT基础设施及其运营越来越复杂,人们通常采用云计算和虚拟化技术来满足各种业务需求.在过去的十年里,服务器虚拟化重新部署.管理以及优化了计算资源,将数据中心转化成为一个更加灵活高效的业务应用平台.专用服务器被动态托管之后,在虚拟服务器环境中能够根据需求运行应用程序. 虽然虚拟化重塑数据中心的运营,企业能够部署机架服务器汇集和分配应用程序的需求,但这种转变并不完整理.数据中心网络和存储资产仍然保持着孤立和静态配置,很少有设施能够自动化统筹管理混合网络和存储硬件. 软件定义的数据中心(SDDC)

能否针对容量和性能来优化数据中心的存储?Adaptec by PMC解决方案给你肯定的答案

能否针对容量和性能来优化数据中心的存储? Adaptec by PMC解决方案给你肯定的答案 Dave Berry 可能需要一个数据中心来帮助我记录下曾访问过的遍布全球的数据中心.然而,无论其地理位置,无论其服务的市场,所有的数据中心都有一个共同的使命:即用最少的资源.以最高的性能.来提供尽可能多的服务. 企业与用户两方面均需要快速而安全可靠的数据访问,另一方面,暴涨的存储内容迫使数据中心不得不添加越来越多的存储容量,同时还要维持客户所期望的高性能. 问题就在于找到一个有效的途径,既能处理日益增

云计算和大数据时代网络技术揭秘(八)数据中心存储FCoE

数据中心存储演化——FCoE 数据中心三大基础:主机 网络 存储 在云计算推动下,存储基础架构在发生演变 传统存储结构DAS.SAN在发展中遇到了布线复杂.能耗增多的缺点(原生性),需要对架构做根本的改变. FCoE是业界无可争议的演化方向,下面重点介绍技术的由来和原理,并从本质上解释为何FCoE是公认的唯一演化方向. 图 FC vs 以太网 vs FCoE 演化路线 2x的演进速度让FC逐渐掉队,未来的存储网络将逐步过渡到以太网架构上 图 传统数据中心存储架构 vs FCoE改造后的存储架构

软件定义存储加码数据治理 助推金融机构数字化转型

当前,伴随信息技术的持续变革与发展,以数字经济为代表的新经济将成为发展新动能.以云计算.大数据.人工智能等为代表的数字技术不断涌现,快速向经济社会各领域融合***.以数据为核心的数字化转型已是大势所趋.金融业是数据密集型行业,在生产经营过程中积累了海量的数据资源,对数据资产进行管理.应用.治理成为金融机构探索和实践的重要方向.在本篇文章中,我们将结合金融机构在数据治理过程中的具体实践,一起探讨软件定义存储技术能够在数据治理体系中发挥怎样的价值. 金融机构数字化转型中数据治理的困难与挑战 金融机构

超大规模数据中心:给我一个用整机柜的理由先

乐高玩具是一款老少咸宜的玩具,只要你有丰富的想像力,就可以将那些标准的模块拼装成任意你想要的东西:小到一朵花,大到一座宏伟的城市.标准化.模块化就是这么神奇,它不仅可以在玩具的世界里化普通为神奇,而且在数据中心领域也可以变不可能为可能. 标准化.模块化深入人心 举例来说,Facebook全球的数据中心.腾讯天津数据中心都借鉴了乐高玩具的设计经验,将数据中心的建筑模块像乐高玩具一样堆叠在一起,让超大型的数据中心成为可以重复利用的可快速部署的数据中心. 在数据中心物理基础设施领域,模块化的设计和部署