WSFC2012 群集存储空间

从2008R2到2012R2 2016 再到即将发布的2019,仿佛就在弹指一瞬间,在这个演变过程中很多技术都发生了变化,有很多新鲜的场景涌现出来,很多好的技术在演变过程中国内没有人提到,尤为可惜,今天老王来为大家补遗一个群集存储空间的技术场景

上来先来看图 左侧是传统的SAN架构,右侧是微软于Windows Server 2012引入引入的简单存储管理架构,微软提出来一个存储空间的架构,用来替换掉原来价格昂贵的SAN,通过为服务器接入简单的JBOD或RBOD架构,然后通过2012新推出的存储池,存储空间功能,来完成存储上控制器的工作,存储池化,磁盘分层,精简磁盘,磁盘去重,磁盘镜像奇偶校验,将SAN上面控制器实现的功能,现在通过2012OS本身的存储功能实现,底层只需要接入一个没有控制器的JBOD磁盘捆绑,或者有RAID控制器的RBOD即可,适配器层使用微软OS自带的ISCSI,SMB3.0,NFS协议直接连接存储,所有对于存储的配置不再需要由存储管理员完成,系统管理员就可以直接在OS上面进行存储配置,简单管理,节约SAN成本,存储虚拟化,灵活分配存储,这是微软存储池,存储空间所解决的目的

常有人将存储空间,SOFS的概念搞混,以为SOFS就是存储空间,老王这里特地和大家解释下这几个概念的区别

存储空间是为了解决通过简单存储+OS配置,软件实现硬件存储阵列的容错,存储池,存储分层,去重功能

SOFS是基于SMB3.0,DNS轮询,WSFC CSV的连续性共享功能,利用SOFS共享可以获得,AA模式的访问交付,横向扩展优化,透明故障转移能力

Windows Server 2016的SDS是一种超融合交付存储资源池的模型,通过SDS可以支持由各节点本地共享磁盘,形成跨服务器的存储池,结合WSFC与存储空间实现端到端存储故障域感知

SOFS底层可以是JBOD存储空间,SAN,SDS,ISCSI,SOFS SDS 存储空间三者之间并无必然联系

上面和大家介绍了下单机上面存储池,存储空间的概念,其实对于新上手2012的人可能会对存储空间这个名词有点陌生,我在管理工具里面看不见存储池,只能看见存储空间,那个是存储空间?其实存储空间就是基于存储池上面创建的虚拟磁盘,当我们创建虚拟磁盘时会配置分层,精简,容错,这个过程其实就是在创建存储空间

那么大家看到微软这套简单存储管理架构里面,最关键的是那部分,无疑是第一张图里面存储控制器的部分,通过这部分实现存储池,存储空间,但是大家都只知道这是单台架构,如果只能用于单台服务器,那企业最多只是用来解决存储虚拟化,节约SAN成本的问题,但是距离真正的企业级应用还是有一点距离

因此还有另外一个技术场景,群集存储空间,如果我将存储控制器这一层实现的存储池,存储空间,通过群集高可用实现,默认情况下有一个服务器承载,这台服务器宕机,由另外一台存储服务器继续承载存储控制器,是否更加贴合实际应用了呢,这样的话我们就可以利用这样一套简单存储+Windows群集的架构,来真正的为业务提供存储使用

需要注意的是群集存储空间的概念,与ISCSI target服务器群集的概念不一样,如果我在群集里面提供了ISCSI target角色,那么我实际上是做的存储前端适配器这一层的容错,即是说我对外面用户访问我的ISCSI协议进行了高可用,如果一台节点连接不上ISCSI,其它节点还可以连接,而群集存储空间是存储池+存储空间的高可用

通过群集存储空间,我们会在WSFC2012上面构建群集存储池,再基于群集存储池创建群集存储空间,创建群集磁盘卷,被创建的群集磁盘卷,将直接作为群集磁盘,群集磁盘可以直接转为CSV提供给自身Hyper-V使用,或构建后端SOFS群集,提供给前端Hyper-V群集使用,但不论如何,这个CSV的底层是由一个高可用的存储空间而来,我们对这个存储空间进行容错或分层设置,即便当前节点失败,转移到另外节点,CSV底层磁盘仍然是保留我们的设置

双端架构上可以选择

前端单台Hyper-V,后端群集存储空间SOFS

前端单机Hyper-V,后端群集存储空间SOFS

前端Hyper-V群集,后端单台存储空间

前端Hyper-V群集,后端群集存储空间SOFS

不同的选择也将获得不同的弹性,高可用性,但是需要注意的一点是,如果您是这种前端Hyper-V,后端存储空间架构,那么Hyper-V连接到存储时会采用SMB3.0协议,去掉传统SAN的代价是网络改造,建议为前端虚拟化到后端存储之间准备10GB网络,以保证存储性能,最好网卡能够支持RDMA技术

除了这四种场景外,还有一种微软在国内很少提及的场景,Cluster in a box解决方案

这种解决方案是什么意思呢,大家可以把它想象成一个开箱即用的盒子,这个盒子里面有两个计算节点,SAS Port连接两个存储JBOD,盒子买来会直接帮我们配置好群集,配置好JBOD容错,配置好群集存储池,群集存储空间,我们只需要用就可以了,通常这种盒子是由厂商OEM提供,它们会把盒子设计成故障域架构,始终帮我们保证有一个计算节点和一个JBOD可用,对于中小企业其实不失为一个不错的方案,据老王所知Dataon 富士康现在在提供这种盒子

实际环境下如果要配置群集存储空间您可以结合自己公司的场景选择合适的架构,并不一定非要是这种CIB,如果仅是一组群集存储空间服务器,那么只要各节点SAS expander接入JBOD存储即可,JBOD可以是一个,也可以是多个配置冗余

下面说下群集存储空间的先决条件

  1. 故障转移群集中创建存储池至少需要三个物理驱动器,每个驱动器的容量至少为4GB
  2. 群集存储池必须由SCSI(SAS)连接的物理磁盘组成。不支持嵌套层提供的存储,无论是内部RAID卡还是外部RBOD
  3. 存储池磁盘必须为固定格式,不支持精简磁盘

需要注意

在2012时代,群集存储池还不支持底层由SATA构成的磁盘加入,2016 SDS可以支持SATA磁盘

在2012时代如果想要利用SATA磁盘创建高可用的存储池,建议借助Starwind产品

实验场景

08DC 10.0.0.2 255.0.0.0

30.0.0.2 255.0.0.0

12node1

10.0.0.5 255.0.0.0 10.0.0.2

18.0.0.5 255.0.0.0

30.0.0.5 255.0.0.0

12node2

10.0.0.6 255.0.0.0 10.0.0.2

18.0.0.6 255.0.0.0

30.0.0.6 255.0.0.0

在我的环境中由于我没有JBOD,所以我用DC模拟ISCSI服务器提供给两台存储节点

通过ISCSI分配给群集存储空间节点3个4GB磁盘

打开故障转移群集管理器管理控制台(cluadmin.msc),在面板左侧,展开“ 存储”,右键单击“ 池”,然后点击“新建存储池”

指定存储池的名称,选择拥有群集存储空间的存储子系统,点击下一步

配置群集磁盘物理磁盘架构,自动或热备用,如果需要配置分层,稍后创建完成后可以手动更新MediaType标签

创建完成界面如下,当前已经构建了群集存储池,可以勾选下面按钮继续创建存储空间,或稍后手动创建

创建完成后手动选择存储池界面下的新建虚拟磁盘,此步骤即是开始创建群集存储空间

输入虚拟磁盘名称,即群集存储空间名称,如果需要配置存储分层,应该在创建完成群集存储池之后去更新标签

选择配置群集存储空间容错布局,在2012时代群集存储空间仅支持简单和镜像,2012R2开始群集存储空间支持奇偶校验布局

创建完成群集虚拟空间后,自动弹出新建卷向导,选择基于群集存储空间磁盘创建卷

创建出来的卷,将自动显示在群集可用存储中

可以将由群集磁盘添加上来的再添加为CSV,上面我们提到的四种场景都是说的Hyper-V与存储分离,我们也可以尝试一种超融合的架构,这种超融合架构可以看到从2012时代就开始了,例如我们就四个节点,可以构建起来群集,先用着四个节点构建群集存储空间,最终到这一步构建出群集共享卷,然后再这四个节点上面安装Hyper-V,就跑在由群集存储空间构建出来的CSV上。有人说这样性能是最佳,但是为了保证存储到计算端到端容错,这也未尝不是一种合适的架构。

那么到了2016这种架构是不是就消失了呢,2016的群集存储池既可以用2012延续的JBOD这种方式构建,也可以用SDS构建,在2012如果使用这种超融合架构我们需要好好设计仲裁以及维护操作,以确保架构稳定运行,2016我们可以进一步利用站点感知和故障域感知技术。

我们也可以将群集做成基于群集存储空间上层的SOFS,再通过这个SOFS为上层的SQL群集或Hyper-V群集使用

测试存储控制器故障转移,当前群集存储池由12node1承载

暂停12node1节点,存储池架构直接在12node2上面联机

群集虚拟空间,以及群集共享卷,联机上线正常使用,存储控制器配置信息即便转移到另外节点也得到保留

在群集运行中也支持手动故障转移群集存储池

这里需要为大家指出的一个问题是采用群集存储空间后的群集仲裁设置,最开始老王犯了一个错误,让群集直接使用群集存储空间的仲裁磁盘,这就有可能会存在一个问题,假设我群集只剩下两个节点+群集存储空间构建出来的见证磁盘,假设见证磁盘背后存储池所在的节点宕机,为什么是群集存储池,因为一切群集磁盘都是通过群集存储池创建的,群集存储池节点如果宕机,那么一切也就不存在了。假设剩下两个节点,或关键票数节点的时候,群集存储池节点突然宕机,导致见证磁盘,来不及调整投票,导致需要强制启动群集,之后要手动联机存储池,存储空间

因此最优设计,应该是在最初设计JBOD磁盘的时候,单独留出来一块磁盘,不加入群集存储池,这块磁盘作为群集仲裁,不受群集存储池节点映像,第二设计是采用文件共享仲裁

其它需要注意的地方

  1. 已经分配给群集存储池的磁盘不能再添加到其它存储池使用
  2. 如果需要将群集配置为SOFS,需要为每个节点安装文件服务器角色
  3. 如果需要为群集磁盘或群集共享卷启用重复数据删除,需在每个节点安装重复数据删除功能

存储空间的管理可以通过群集管理器或2012服务器管理器,不论是单机存储空间,或是群集存储空间,都可以在服务器管理器里面配置,利用存储空间,存储池配置的磁盘将获得灵活弹性,磁盘享受存储空间的容错配置,分层配置,如果磁盘大小不够可以由存储空间给予在线扩展,如果存储空间不够,可以通过增加磁盘扩展,存储池可以配置为自动修复机制,自动替换备用磁盘

如果我们有SCVMM架构的话,也可以利用SCVMM集中帮我们管理群集存储池,群集存储空间,SOFS

将存储池群集作为providers添加进入存储基础结构

管理群集存储池阵列

将添加进来的群集存储池,通过创建逻辑unit的方式划分,然后分配给计算节点

如果群集配置有SOFS,可以将SOFS与群集存储池一起加入SCVMM管理,构建端到端的存储管理

希望可以通过这篇文章让大家了解群集存储空间的概念,为大家带来思考与应用

原文地址:http://blog.51cto.com/wzde2012/2146062

时间: 2024-11-02 12:05:40

WSFC2012 群集存储空间的相关文章

Windows server 2016 key 序列号 密钥 破解 激活工具

Windows server 2016 key 序列号 密钥  破解 激活工具 Windows Server 2016 中的新增功能 点击获取Windows 2016 激活工具 计算 虚拟化区域包括适用于 IT 专业人员的虚拟化产品和功能,以设计.部署和维护 Windows Server. 常规 由于 Win32 Time 和 Hyper-V 时间同步服务的改进,物理和虚拟计算机从更高的时间准确性中受益. 现在,Windows Server 可以托管与即将推出的要求 UTC 准确性为 1 ms

基于WinSrv2016(TP)构建的“超融合基础架构”

最近发现一个很热门的话题,国内的很多厂商也搞出了自己的"超融合基础架构服务器",那么什么是"超融合基础架构"呢? 超融合基础架构(Hyper-Converged Infrastructure,或简称"HCI")也被称为超融合架构,是指在同一套单元设备(x86服务器)中不仅仅具备计算.网络.存储和服务器虚拟化等资源和技术,而且还包括缓存加速.重复数据删除.在线数据压缩.备份软件.快照技术等元素,而多节点可以通过网络聚合起来,实现模块化的无缝横向扩展

WSFC2016 On Azure

本篇文章,老王将为大家介绍WSFC在Azure上面跑的一些执行操作,以及操作过程中需要注意的地方 之所以要写这篇文章有几个原因 1.为大家破除群集能否在公有云平台跑的迷思 2.为大家带来群集在公有云平台跑的思考 3.为大家介绍WSFC 2016 借助于Azure实现的云S2D,云仲裁 首先,WSFC群集能不能在公有云平台跑呢,答案是可以的,理论上来说,只要可以满足建立群集的要求,我们可以在私有云,公有云,混合云任何一个平台上面部署群集 思考一下,当我们建置一个群集时有哪些最基本的先决条件要准备

Windows Server 2016软件定义存储之QoS

存储QoS简介 Windows Server 2016文件服务器和Hyper-V群集默认集成了存储QoS功能,基于群集存储空间的存储无论是SOFS SMB共享还是CSV都支持存储QoS,存储QoS通过策略应用到Hyper-V群集上的虚机.文件服务器群集里默认开启QoS策略管理器,用于集中监视存储性能,保存在SMB或者CSV的Hyper-V虚机被策略管理器监视着.策略管理器和Hyper-V服务器形成一个存储QoS策略优化的闭环来反馈调节QoS,策略管理器保持着和Hyper-V沟通存储QoS策略.限

Windows Server 2016-Win Ser 2016新增功能

本来想着整个系列都是与Active Directory相关的内容,上一章节我们应读者要求补充了Window Server 2016标准版与数据中心版的区别,鉴于读者的疑惑,从本章节开始补充三到五章与Windows Server 2016相关内容,希望可以帮到有需要的读者.PS.建议读者们学会学习的方法,学会搜索并消化整理相关知识点是学习技术的第一步,贪多嚼不烂,善于理解并按自己的思路总结相关内容才能不断进步:学习微软相关技术,要学会在docs.microsoft.com(docs.microso

Windows Server 2016-存储新增功能

本章给大家介绍有关Windows Server 2016 中存储方面的新增功能,具体内容如下: 1.Storage Spaces Direct: 存储空间直通允许通过使用具有本地存储的服务器构建高可用性和可缩放存储. 该功能简化了软件定义的存储系统的部署和管理并且允许使用 SATA SSD 和 NVMe 磁盘设备等新型磁盘设备,而之前群集存储空间无法使用共享磁盘. 价值: 空间存储直通使服务提供商和企业可使用带本地存储的行业标准服务器来构建高可用性和高扩展性的软件定义的存储. 使用带本地存储的服

微软私有云测试01-Windows Server 2016虚拟化新功能概述

Hello,大家好,许久未见,你好,51Cto博客:你好,Superdream,好久没有写博客了,许久未动笔,却不知如何去撰写开头,距离上一篇博客已经过去了一年半的时间,有时候我就在想,自己这一年半工作究竟做了些什么,自己所推崇的"技术的价值在于分享"实践到了何处,归根到底,只能用一个字来解释,就是"懒".从2011年至今,IT技术生涯已经近乎7年,不知道自己在技术这条路上还能坚持多久,但技术永无止境.不断发展,在后面的技术生涯中,计划定期发表一些能够对其他技术人员

Windows Server 2016 存储空间直通 (S2D)实验

存储空间直通是一个基于 Windows Server 的存储解决方案,它使用具有本地连接驱动器的行业标准服务器来创建高度可用.高度可扩展的软件定义存储. 实验由5台虚拟机组成(域:easthome.com): 主机 名称 磁盘配置 网络配置(E1:是数据网络:E2:是心跳网络) 域控制器 DC E1:172.16.1.1/16 客户端DNS都指向本机 连接虚拟交换机:"nb" S2D主机 S1 SSD-10.vhdx:20GB HDD-10.vhdx:30GB E1:172.16.1.

Hyper-v Server存储空间介绍

Hyper-v Server存储空间介绍 存储空间(Storage Spaces)是微软对存储虚拟化和软件定义的回答,微软允许在Windows Server 2012和Windows Server 2012 R2的企业数据中心虚拟化的共享存储来配置和管理存储空间.在企业数据中心内配置和管理存储空间,我们不需要昂贵的SAN等其他存储,而是使用廉价的磁盘阵列来实现.存储空间的目标是解决由新应用和服务.虚拟端点设备的扩展.大数据的激增以及云任务的发展等导致的不断增长的存储需求. 存储空间将共享存储虚拟