云存储

  1. 根据提供给用户的存储结构进行归类,云存储可分为“非可管理型云存储“与”可管理型云存储“

    1. 非可管理性呈现一个可以立即使用的磁盘驱动器,面向普通用户;限定了存储容量和使用方式使用成本低,操作简单
    2. 可管理型则需要对原生虚拟化磁盘进行配置,面向开发人员,将存储空间呈现为原生磁盘,提供给用户进行配置和管理
  2. 云存储设备可以是块存储设备、文件存储设备或者对象存储设备
    1. 块存储设备对于客户端相当于原始存储,可以被分区以创建卷,由操作系统创建和管理文件系统,传输单位是块。
    2. 文件存储设备采用网络附加存储的形式(NAS),NAS维护自己的文件系统,以文件形式提供给客户;

      块存储可以提高更快的传输速度,但客户端有额外开销

      面向文件存储设备通常很慢,但建立链接时客户端开销小

    3. 对象存储兼具块存储高速访问以及文件存储分布式共享特点

      由元数据服务器、存储节点、客户端构成

      元数据服务器MDS:管理文件的存储位置、状态

      存储节点OSD:复制文件数据存储

      客户端:负责对外接口访问

      数据通路(读写)与控制通路(元数据)分离

    云存储系统架构

    1. 从底层到上依次为:数据存储层、数据管理层、数据服务层、用户访问层

磁盘驱动器接口

磁盘接口对整体性能有直接影响

存储设备主要分为三种:高端、中端、近线

高端:FC(光纤通道)磁盘

应用于关键数据的大容量实时存储

中端:SCSI、SAS(串行连接SCSI)

商业级的关键数据的大容量实时存储

近线:SATA磁盘存储

非关键数据的大容量存储,目的是替代以前的磁带备份

存储架构

 概览

DAS直连存储

直接将存储设备通过总线适配器和电缆(SCSI、FC)直接连接到服务器的架构

DAS依赖于服务器,本身不带有存储操作系统

数据和操作系统未分离

只能被一台计算机连接,无法实现共享

NAS附网存储

以数据为中心的数据存储模式

不同于das附着于固定的服务器,它完全独立于网络中的主服务器,并且允许客户机于存储设备间直接进行数据访问

NAS是可以直接连接到网络上向用户提供文件级服务的存储设备

一个NAS包括:处理器、内存、网卡、文件服务管理模块、用于存储的硬盘驱动器

以文件I/O方式进行数据传输,基于现有的LAN构建,按照TCP/IP等协议通信

SAN存储区域网络

指的是通过一个专用的网络把存储设备和TCP/IP局域网上的服务器集群相连接

SAN独立于传统局域网,通过网关设备和局域网相连接,传输速率极高,并且可以跨不同存储设备和服务器以及不同网络与不同平台

SAN存储架构以FC光纤网络位基础,实现存储设备共享,突破距离和容量限制

数据传输方式为块传输,基于专用的光纤通道网络构建

DFS分布式文件系统

文件系统从宏观可分为本地文件系统(LFS)和分布式文件系统(DFS)

 数据保护技术

  1. 备份技术

    分为离线备份与在线备份

  2. 镜像技术
  3. 快照技术
  4. 持续数据保护

    捕捉一切文件级或数据块级别的数据写,改动,可以恢复到任意时间点。

 数据备份

作为存储系统中最重要的应用之一,是保护数据的关键手段

备份策略

完全备份

拷贝整个文件系统到备份设备

缺点:存在大量重复数据、数据量大、备份时间长

增量备份

在完全备份的基础上仅仅拷贝新生或者修改的文件

不存在重复数据、节省空间,但恢复数据会较麻烦

差量备份

拷贝所有新数据,新数据指的是“上一次完全备份后产生或更新的”

与完全备份比备份时间短并节省空间

与增量备份比,数据恢复方便

增量与差量区别

增量备份记录上一次完全备份或增量备份以来的更新数据

差量备份记录上一次完全备份以来的所有更新数据

硬盘

磁盘片表面称为盘面。

磁盘片表面上以磁盘片中心为圆心,不同半径的同心圆称为磁道。

不同磁盘片相同半径的磁道所组成的圆柱称为柱面。

磁盘片被分成许多扇形的区域,每个区域叫一个扇区。

原文地址:https://www.cnblogs.com/benjaminfee/p/10186837.html

时间: 2024-10-10 08:25:01

云存储的相关文章

云存储技术优势及其发展趋势的探讨

云存储技术优势及其发展趋势的探讨 1.引言 近年来,由于信息技术的发展,科学计算和商业计算等众多应用领域会产生了规模相当巨大的数据,并且数据量仍在快速增加,呈海量形式发展.在科学计算方面,如物理学.天文学.生物学等领域都会产生规模庞大的数据,而且每年的数据规模达到若干PB.而在商业计算方面,Web搜索.社会网络等需要处理的数据规模也非常庞大,例如,Google和Facebook等应用产生的数据达到PB甚至EB级.按照摩尔定律,处理器的速度每18个月就会翻一番,光纤技术的发展也大大加快了数据在网络

iOS开发——数据持久化Swift篇&iCloud云存储

iCloud云存储 1 import UIKit 2 3 class ViewController: UIViewController { 4 5 override func viewDidLoad() { 6 super.viewDidLoad() 7 /** 8 1:可以存储两种 9 //IOS可识别的文档 10 11 //字典对象 12 */ 13 14 // 2: Ubiquity Container............数据区域 15 16 17 /** 18 3: 19 分成多个文

RAM云存储已经出现了,就是特别贵

据说bat有这种全内存的服务器集群, RAM的问题是,容量上去了就会很费电,而且不方便做持久化,并且成本也不低,一般只能作为缓存.内存数据库,给bat.12306这种高富帅用 也有提供内存云存储的服务商:http://www.ucloud.cn/product/umem_main/ spark.impala这种新兴计算框架火了以后,这玩意肯定是一个发展方向 原理是这个: http://blog.csdn.net/anzhsoft/article/details/21830991

学习MVC之租房网站(十一)-定时任务和云存储

在上一篇<学习MVC之租房网站(十)-预约和跟单>完成了用户的预约看房以及后台操作员对预约看房的跟单操作.接下来会做定时发邮件的功能,并且用云存储进行上传图片的保存. 一 定时任务和邮件发送 a) 通过实现定时发邮件这个功能,在学习Quartz.Net的同时也能用用邮件发送.Quartz.Net支持各种各样灵活的定时配置,以天.周.月的周期都能支持.使用Quartz的时候,要涉及三个方面:IScheduler.Job和Trigger,自己写的任务作为Job,定时配置放在Trigger中,到了指

cStor云存储、cProc云处理、cVideo云视频、cTrans云传输,云创个人网盘

http://www.cstor.cn,微信公众号:cstor_cn.      云创大数据是国际上云计算产品线齐全的企业之一,针对爆炸式增长的大数据需求,研发了自主知识产权的cStor云存储.cProc云处理.cVideo云视频.cTrans云传输等产品线,每条产品线都有让人眼前一亮.    cStor云存储系统是一款软件与硬件相结合的高科技产品,具有性价比高.低功耗.高可靠.通用.免维护等优势,可广泛应用于海量数据存储需求的场合(如安防.广电.电信.互联网.银行等领域).cStor A800

使用Azure云存储构建高速 Docker registry

使用Azure云存储构建高速 Docker registry 使用Docker来构建应用程序最常见的操作就是 docker run 或者 docker pull了,但是由于众所周知的原因,在国内想要高速稳定的获取docker hub上面的资源并不是件容易的事情,虽然国内的一些docker社区也提供了所谓的加速器,但是实测结果并不理想.今天这篇文章就给大家介绍一下怎么借助Azure Storage来搭建一个高速的私有 Docker Hub (Registiry). 一图解千言,基本上一看你就明白了

升级版:深入浅出Hadoop实战开发(云存储、MapReduce、HBase实战微博、Hive应用、Storm应用)

      Hadoop是一个分布式系统基础架构,由Apache基金会开发.用户可以在不了解分布式底层细节的情况下,开发分布式程序.充分利用集群的威力高速运算和存储.Hadoop实现了一个分布式文件系统(Hadoop Distributed File System),简称HDFS.HDFS有着高容错性的特点,并且设计用来部署在低廉的(low-cost)硬件上.而且它提供高传输率(high throughput)来访问应用程序的数据,适合那些有着超大数据集(large data set)的应用程序

云存储:文件的上传

大型网站架构:降低主站服务器的压力 CDN:智能DNS挑选最近的服务器提供图片等 云存储:把图片放到单独的服务器,价格低 云存储:七牛.AWS.又拍云.盛大云.阿里云.百度云 云计算:租.按需使用.按需付费 又拍云:帐号注册--操作空间 上传: ftp:// 登录 http:// 下载SDK 问题:把上传的文件不存在当前应用程序某个文件夹下,而是直接存到云存储,并返回一个云服务器的路径 ---??? 步骤:注册-ftp上传-http上传(下载SDK-demo示例)-保存到云上.返回云路径 pub

坚果云创业团队访谈:我们 DIY 云存储

坚果云(http://jianguoyun.com/)是一款用于多平台文件同步.备份和交换的云存储工具,立志于提供“便捷,安全”的服务.坚果云自去年年初启动内测,至今年三月初刚刚正式发布.近日我们拜访了坚果云位于上海浦东张江的创业团队,就其产品本身与国内云存储行业的风云变化进行了交流.以下是本次访谈内容的整理—— 1.首先请大致地介绍一下你们产品(广告时间). 1)坚果云是国内最早支持 Windows.Mac.Linux.iOS.Android 全平台的同步工具,同步算法也很可靠,很多用户都评价

(转)云存储:阿里云OSS 、又拍云和 七牛 的比较

阿里OSS:好处就是,那是一套完整的体系,存储,数据库,CDN,服务器,阿里都可以给你全包.缺点,费用对于没有盈利的网站来说太高了,好像定位就是给那些高端客户使用的,而且CDN,OSS的流量是分开收费,带宽(2倍成本,呵呵).又拍云:算是老牌静态存储服务商,自带有CDN.存储空间可以弹性增加(不知道可不可以弹性减少,我只是免费使用了一下).费用计算公式(空间和流量),请求次数是免费.可免费试用7天.开源的程序(DZ,PW,WP)都有插件,也可以直接使用FTP,对于技术上要求不是太高就可以使用.七