存储技术基础—存储架构和RAID

1、服务器与存储系统

服务器:提供计算能力、为网络请求提供服务。

存储系统:存储设备+存储管理系统+RAID磁盘系统、接受I/O请求。

存储架构:

                DAS (Direct Attach STorage)存储设备直接和服务器连接

                NAS  (Network Attached Storage) 网络附加存储,采用网络技术,通过交换机连接存储系统。

                SAN  (Storage Area Network)存储区网络,采用 FC(光纤通道),将存储系统网络化

RAID:  (Redundant Array of Independent Disks)磁盘阵列

2、数据存储类型

文件存储:NAS

块存储(Block):DAS和SAN

对象存储(网络存储架构): 对象存储同兼具SAN告诉直接访问磁盘特点及NAS的分布式共享特点。核心是将数据通路(数据读或写)和控制通路(元数据)分离,并且基于对象存储设备(OSD)构建存储系统,每个对象存储设备具有一定的只能,能够自动管理其上的数据分布。对象存储结构组成部分(对象、对象存储设备、元数据服务器、对象存储系统的客户端)。

3、存储架构和特点

  • DAS是以服务器为中心的存储结构,就是将存储设备直接连在服务器上(大多SCSI接口),然后服务器连接在网络上,网络上任何客户端要访问某存储设备上的资源必须经过服务器。由于连接在各个节点服务器上的存储设备是独立的,因此整个网络上的存储设备其实是分散、独立而无法共享的。DAS存储方式是以服务器为中心的,所有的数据流必须经过服务器转发,因此服务器的负担比较重,也是整个系统的瓶颈。服务器的CPU、内存及I/O均影响DAS的性能。

  • NAS是以数据为中心的存储结构,是一种完全脱离服务器就可直接上网的存储设备,NAS把任务优化的存储设备直接连接到网络上,用户可直接通过网络共享NAS设备中的数据,解决了DAS中存储对服务器的依赖及服务器的瓶颈问题。在NAS下,客户机对资源的请求直接发送给NAS设备,改请求返回的数据也直接发给请求者而无需服务器的中转,大大提高的响应速度和传输速率。NAS采用RJ—45标准网络接口,只要将NAS设备通过集线器或交换机连接到TCP/IP网络,分配一个IP地址即可。NAS支持异构网络环境下的跨平台文件共享,支持WINDOW/UNIX/APPLE等。

  • SAN是一种以网络为中心的存储结构,不同于普通以太网,是位于服务器后端,为连接服务器、磁盘阵列、带库等存储设备而建立的高性能网络。SAN以数据存储为中心,采用可伸缩的网络拓扑结构,通过具有高传输速率的光通道(或者ISCSI)的直接连接,提供SAN内部任意节点之间的多路可选择的数据交换,并且将数据存储管理集中在相对独立的存储区域网内。SAN与传统的DAS区别在于DAS的存储设备专门服务于所连接的服务器,而SAN模式下所有服务器可以通过高速通道共享所有的存储设备。SAN的主要设备:存储设备(磁盘阵列)、服务器、连接设备(网络交换设备及光纤等)、存储管理软件。SAN的优势在于所有存储设备高度共享,所有存储设备可以集中管理同时具有冗余备份功能,单台服务器宕机系统照样工作。

总结:DAS的特点是存储专属性,每个服务器是其附属的存储设备的“MANAGER”,专属而独立;SAN可以满足高需求的存储要求,但其光纤交换机成本太高,而且服务器和存储设备之间有距离限制;NAS打破了DAS的存储设备专属问题而共享,也没有SAN高昂的光纤交换机成本问题和距离限制,但是其NAS服务器本身限制了其性能,并不适合做视频存储,但适合在多点并发访问的情形;ISCSI具有 SAN的架构和相对低廉的成本,但对交换机的配置和网络稳定性要求很高

4、RAID

JBOD:同一磁盘柜内的一组磁盘,不提供容错,提升小,由于JBOD的缺陷出现了RAID。

条带化:RAID是数据条带化独立的磁盘,将多个驱动器划归到一个逻辑存储单元的组合方式。

级别:每种级别具备不同的成本、性能、容错优势。

RAID:

JBOD:

RAID Level 0: 带区集

RAID Level 1:镜像

RAID Level 3 :专盘校验的带区集

RAID Level 5:分布校验的带区集

RAID Level 10:

RAID Level 30:

RAID Level 50:

RAID 级别比较:

RAID0:并行传输没有校验。

RAID1:容量利用率对半,冗余量大。

RAID3:并行传输、专盘奇偶校验,适合大数据。

RAID5:并行传输、非专盘奇偶校验,适合小数据。

RAID10:一半RAID1 一半RAID0。

5、未完待续补充。

时间: 2024-08-26 08:05:59

存储技术基础—存储架构和RAID的相关文章

关于网络存储技术和存储的协议

关于网络存储技术和存储的协议 网络存储技术 网络存储技术(Network Storage Technologies)是基于数据存储的一种通用网络术语.网络存储结构大致分为三种:直连式存储(DAS:Direct Attached Storage).网络存储设备(NAS:Network Attached Storage)和存储网络(SAN:Storage Area Network). 直连式存储(DAS) 这是一种直接与主机系统相连接的存储设备,如作为服务器的计算机内部硬件驱动.到目前为止,DAS

存储基础知识—架构和RAID

1.服务器与存储系统 服务器:提供计算能力.为网络请求提供服务. 存储系统:存储设备+存储管理系统+RAID磁盘系统.接受I/O请求. 存储架构:                 DAS (Direct Attach STorage)存储设备直接和服务器连接,接口为IDE或者SCSI.                 NAS  (Network Attached Storage) 网络附加存储,采用网络技术,通过交换机连接存储系统(服务器),接口为TCP/IP.                

数据库存储技术基础(一) 字典编码

说到数据库存储技术的基础,就要了解企业应用的数据特性以及面临的瓶颈. 1.企业应用的数据特性 事件产生数据 以快递追踪为例,信息读取过程包括当前读取操作的地点.时间戳.当前所处的业务流程(如收件.打包.运送)以及其他详细信息.当然,对网络游戏活动数据的分析就更为复杂.每个事件数据的数据集较小(Byte/KB)而每个实体可产生多个事件. 结构化/非结构化数据的结合 结构化数据有标准的格式存储即可被计算机自动处理.非结构化数据是不具有特定的数据解析模型,不能被计算机自动处理的数据,例如视频.图片与任

云存储技术的发展现状和创新方向

一.云存储的现状与创新 在安防行业中,存储的存在形式较为多样,传统如DVR/NVR.SAN.NAS等.各种存储方案的存在均满足于安防行业特定场景变化的需要和受力于市场作用的结果.云存储技术作为存储技术中的一项重大革新,在安防行业中的多项场景应用中填补了空白,同时随着技术创新的不断深化,在传统建设领域上的应用上也出现的云存储的身影. 在满足小型视频监控的需求时,用户通常会倾向于DVR或者NVR,当规模再大一些时会使用SAN或者NAS存储方案.而随着规模的不断加大,庞大存储系统的整合.资源利用率的提

CLUSTER集群与存储技术

一.集群 一组相互独立的.通过高速网络互联的计算机构成一个组,并以单一系统的模式加以管理 将很多服务器集中起来一起进行同一种服务,在客户端看来就象是只有一个服务器 可以在付出较低成本的情况下获得在性能.可靠性.灵活性方面的相对较高的收益 任务调度则是集群系统中的核心技术 二.集群分类 高性能计算集群HPC –        通过以集群开发的并行应用程序,解决复杂的科学问题 负载均衡(LB)集群 –        客户端访问负载可以在计算机集群中尽可能平均地分摊处理 高可用(HA)集群 –    

网络存储协议和相关技术基础篇

SCSI SCSI是小型计算机系统接口(Small Computer System Interface)的简称,于1979首次提出,是为小型机研制的一种接口技术,现在已完全普及到了小型机,高低端服务器以及普通PC上. SCSI可以划分为SCSI-1.SCSI-2.SCSI-3,最新的为SCSI-3,也是目前应用最广泛的SCSI版本. 1.SCSI-1:1979年提出,支持同步和异步SCSI外围设备:支持7台8位的外围设备,最大数据传输速度为5MB/s. 2.SCSI-2:1992年提出,也称为F

PMC 携手C3 沙龙探究存储技术

PMC 携手C3 沙龙探究存储技术 发源于北京的C3沙龙以聚集各路技术高手著称,围绕云计算.云存储.互联网技术等议题定期举办交流会.本月15日PMC携手C3在上海举办存储技术交流会,现场吸引45名技术铁粉们参与,并进行互动讨论. 三位演讲嘉宾分别发表精彩演讲: PMC数据中心存储架构师张冬的演讲内容涵括4个主题.主题一探讨"何为软件定义".张冬表示软件定义并不是"开源+白牌机",而是"接口灵活可充分满足各类场景且方便调用",本质上应该是"

网络存储技术介绍(2) ( based on zt)

http://www.educity.cn/tx/429084.html 互联网技术DAS.NAS和SAN存储方案的比较 按照设备位置和接入方式,磁盘存储可以分为内置存储和外挂存储,外挂存储又分为直连存储和网络存储(Fabric-Attached Storage,FAS)等方式,如图10-31所示. yxr注:其实是存储历史发展的一个过程,从附属部分走向独立,从单独硬件走向网络! 1.DAS与NAS存储方案的比较 DAS是大型服务器主要采用的外挂存储方式,由于存储利用率和扩展的原因, DAS必须

云存储技术彻底解决视频监控风险及碎片问题

据IMSResearch统计,2011年全球摄像头的出货量达到 2646万台,预计到2015年摄像头出货量达5454万台.仅仅视频监控录像而言,每天的数据量就达上千PB,累计的历史数据将更为庞大,在视频监控大 联网.高清化推动下,视频监控业务步入数据的井喷时代.而大数据的到来,极大程度上考验着视频监控存储技术.云存储与智能存储概念被深化. 用于监控的存储技术经历了从单个的磁带.磁盘.磁盘列阵到存储网络系统的发展历程.而存储智能化的重要拐点就在于磁盘列阵RAID的出现.在IP- SAN中,存储成为