杉岩数据媒资CDN视频存储解决方案

一、 方案背景

高清、超高清视频的蓬勃发展,用户对高品质视频体验的渴望,对网络的并发处理和内容平台的存储能力提出了更高的要求。作为产业链的重要一环,CDN(内容分发网络)进入规范发展快车道。CDN的快速发展将为内容分发平台的建设和普及提供强有力的支撑。随着业务的不断拓展,具备横向扩展、弹性自适应、支撑海量客户端并发访问的存储平台顺应超高清视频时代的发展趋势。

二、 挑战

1、 传统存储无法满足源站新型业务需求

源站是视频点播平台的核心内容库,随着时间的推移,采购的节目和内容越来越多,存储需要支撑几十甚至上百PB的内容,而受限于机头或者架构,传统存储平台并不能存储所有内容,且在面临需要扩容的时候无法实现不停机扩容。

2、 传统数据保护手段存在安全问题

由于容量、架构限制等问题,传统存储往往采用多套存储来进行数据存储,且每套存储只能采用RAID等机制等保障数据安全。由于数据量越来越大,存储节点越来越多,单点故障等问题凸显。

3、 传统存储无法应对海量用户端的巨大流量压力

前端用户的增长带来了更高的流量输出,但传统模式下后端存储受限于机头,存储的稳定视频流输出无法通过扩容继续提升,为了提高用户观看体验,需要CDN和线路等其他环节进行视频流加速处理。

4、 传统存储无法支持快速索引和视频后处理需求

传统存储不支持索引,不能直接通过索引、缓存、流分裂、组播等技术,将内容发布或投递到距离用户最近的服务节点,也无法支持视频的内容分析、内容审核、智能生产等视频智能化处理引擎。

三、 解决方案

CDN视频存储解决方案提供源站视频数据的统一存储平台。通过杉岩海量对象存储(SandStone MOS)将多台服务器上的本地磁盘整合起来,形成一个或多个大规模存储资源池,通过多副本和故障域的数据安全保护机制,保证数据安全和业务连续性。

CDN是多读少写的应用场景,在写入数据时,存储将数据切片均匀、冗余地分布到不同服务器的不同硬盘上;在读取数据时,从多个节点的硬盘同时读取,提供高带宽的稳定视频流,同时为了满足前端多并发的需求,存储还自带负载均衡服务,不会出现网络瓶颈和卡顿,保证了高品质视频体验。

四、 方案收益

l 分布式数据存储,弹性扩展高可靠

采用去中心化的分布式架构,存储容量可达EB级以上

可按需采购,容量与性能随节点数增加线性增长

多副本、多故障域等多种安全机制保障数据安全

硬件异常时,启动自动化快速数据重建机制

l 视频优化技术,更快速的视频访问体验

大文件数据切片存储,提供多节点、高带宽稳定视频流

存储节点在线扩容,性能输出呈线性增长,底层数据自动分布均衡

视频流量负载均衡,支撑前端海量内容并发读取

l 视频标签索引,智能视频处理

内置视频的内容分析、内容审核、智能生产等视频智能化处理引擎

自动视频标签处理,更快速、精确地检索视频

支持与Hadoop、Spark等大数据分析平台对接

l 高兼容性,完美匹配主流CDN平台

采用标准S3对象存储协议,可平滑对接至现有支持S3协议的业务系统

提供RESTFul API、控制台以及多种语言的SDK工具包

提供开发支持服务,支持点播平台快速改造上线

原文地址:https://blog.51cto.com/14636092/2474495

时间: 2024-10-01 09:01:37

杉岩数据媒资CDN视频存储解决方案的相关文章

杉岩数据:对象存储是企业海量非结构化数据存储的最佳选择

海量数据的爆炸式增长,使存储技术近五年的发展速度远超过去n年的发展历程.C端用户一个明显的感觉就是:U盘存储容量从过去物以稀为贵的几十M迅速发展到今天几十G.甚至TB级,家用电脑硬盘容量更是TB级标配. 那么,企业级又迎来了怎样的变化? IDC数据显示,到2020年,企业数据总体将达到44ZB,其中80%的数据将会是非结构化数据(图片.视频.归档以及企业级备份等各种数据).显然,海量数据的产生正在促使企业级存储从需求到产品形态都发生了改变. "相对于NAS.SAN这种传统企业级存储解决方案,对象

海量非结构化数据存储难题 ,杉岩数据对象存储完美解决

"过去几年,大数据产业更多关注的是如何处理海量.多源和异构的数据,但我们必须承认这些只是冰山一角.目前,结构化数据仅占到全部数据量的20%,其余80%都是以文件形式存在的非结构化和半结构化数据.伴随非结构化数据呈现爆发之势,对象存储市场近两年保持强劲增长,IDC预计,软件定义存储(SDS)市场未来五年复合增长率将达到28.8%." 传统IT架构渐成"过去式" 非结构化数据倒逼存储变革 今天,许多企业已经意识到,结构化数据仅仅是企业所拥有数据的一小部分.与业务信息系统

国产化软件定义存储厂商杉岩数据获B轮投资,广发乾和领投

2019年4月22日 深圳市杉岩数据技术有限公司完成由广发乾和领投,深圳中小担集团发起和管理的深圳市人才创新创业三号基金(简称“人才三号基金”)跟投的B轮融资. 杉岩数据创始人兼CEO陈坚表示:“该轮资金将主要用于加大产品关键技术的研发投入,进一步提升新一代智能存储产品的智能化和自动化.依托国际化的技术创新优势和长期积累的研发实力,深入结合市场需求,以客户需求为导向,杉岩将与合作伙伴携手,通过创新的产品.解决方案及服务为各行各业的数字化转型提供大数据存储.管理.挖掘.分析和新一代人工智能应用的基

杉岩数据对象存储替换IBM FileNet,突破性能瓶颈

近年来随着非结构化数据的爆发性增长,由于IBM FileNet系统架构问题出现了明显性能瓶颈,杉岩海量对象存储系统(SandStone MOS)采用全分布式架构,针对海量文件场景提供可线性扩展的持续快速访问性能,同时提供全方位的海量数据保护支持和数据生命周期管理功能,能够完美替代IBM FileNet. 非结构化数据的爆炸式增长,使有价值的信息散落在各个"孤岛".这些非结构化信息包括办公文档.视频影像与音频.HTML网页.电子邮件.文本.报表等等,这些信息通常被放在企业的数据库.文件系

杉岩数据医疗影像存储解决方案助力深圳某医院PACS业务24小时运行

X光机.CT.核磁共振等医学影像技术,是辅助临床医生进行决策的重要工具.作为PACS影像数据的载体,杉岩基于双活存储解决方案,推动深圳某医院实现PACS影像数据的集中管理和存储双活,保障医院PACS业务7*24小时运行,方便医生随时随地调用.判读影像数据,让患者体验智慧医疗. 在现代医疗中,X光机.CT.核磁共振等医学影像技术,成为辅助临床医生进行决策的重要工具.作为医疗影像业务的核心,PACS系统(译为"医学影像存档与通信系统")成为医院信息系统的重要组成部分. PACS医学影像数据

杉岩数据银行Documentum迁移方案

一.方案原理 常规的Documentum迁移工具,如图1所示EMC原厂提供的EMA(Documentum Enterprise Migration Appliance)迁移工具,通常通过绕开Documentum的内容服务器API接口,根据Documentum内部文件对象索引规则直接访问数据库和NAS服务器来加速Documentum迁移过程,性能相比于通过API接口迁移能够提升10倍,但是每个小时也只能搬迁120万对象,如果Documentum存储了10亿文件对象,刨去其他工作或者异常处理的时间,

杉岩数据企业内容管理解决方案

随着人工智能.4G/5G技术发展,越来越多的企业利用照片.视频等方式取代现场业务办理,提升业务办理效率,同时通过这些方式记录业务处理过程,保证服务质量.而这些方式的应用,使得企业应用产生非结构化数据的来源变多,非结构化数据量也呈现爆发性增长,对这些数据的科学管理和有效开发成为企业正确决策.增强竞争力的关键. 杉岩企业内容管理解决方案,帮助企业客户实现跨业务系统的非结构化数据统一存储.统一管理和价值挖掘,提升企业业务管理水平. 客户需求 数据增长快导致管理复杂化 文件数量快速增长达到数亿级别,存储

杉岩数据2020年分布式存储技术研讨会顺利举办

在全球科技革命与产业变革浪潮中,信息科技与各个领域的融合已势不可挡.随着融合的不断深入,政府的治理方式也随之发生变化.建设数字政府成为"创新行政方式.提高行政效能,建设人民满意的服务型政府"的重要途径和关键抉择. 在政府部门加大对数字政府的信息基础设施建设投入过程中,优化信息存储与信息使用安全环境,为数据的采集.存储.开发和利用提供可靠的数据源,将有利于政府提升决策能力.管理能力和服务能力. 2020年1月2日,杉岩数据在深圳总部举办了分布式存储技术交流会,深圳市20多家市.区政府单位

杉岩数据异地容灾备份解决方案(中移物联网案例)

中国移动物联网有限公司(简称中移物联网)是中国移动全资子公司,聚焦物联网产业,专业化运营物联网专用网络,设计生产物联网专用模组和芯片,打造车联网.智能家居.智能穿戴等特色产品,开发运营物联网连接管理平台 OneLink和物联网开放平台OneNET.中移物联网拥有11万企业客户,物联卡用户超4亿,是全球四大物联网连接管理平台之一. 公司按照中国移动整体战略布局,围绕"物联网业务服务的支撑者.专用模组和芯片的提供者.物联网专用产品的推动者"的战略定位,专业化运营物联网专用网络,设计生产物联