全闪存阵列为大数据优化

为了更好地支持大数据应用,富士通推出了针对大数据进行优化的全闪存阵列和大数据一体机,在保证整个系统高性能和高可靠的前提下,进一步提升了数据处理和分析的效率。

  大数据是继云计算之后又一项将改变传统商业模式和IT应用方式的重要变革。从存储的角度看,富士通正逐渐将产品的重点向大数据倾斜,近日推出了最新的全闪存阵列ETERNUS DX200F和面向大数据的一体机MHA。

  全闪存阵列ETERNUS DX200F是一款面向中小企业用户的入门级存储产品。虽然是一款入门级的产品,但是ETERNUS DX200F在性能上丝毫不逊于中高端的存储产品。SPC-1 Benchmark测试数据显示,ETERNUS DX200F的IOPS值突破了20万,在满负载的情况下,延迟只有0.63ms。

  随着云计算应用逐渐普及、移动设备增加、海量数据快速增长,企业的数据处理工作变得越来越复杂。如何高效、可靠地处理海量的数据,及时地进行数据分析,同时有效地利用数据是摆在企业面前的一个重要课题。在很多企业普遍应用Oracle数据库的情况下,富士通ETERNUS DX200F全闪存阵列的一个核心价值就是提高Oracle RDBMS的存取性能。

  富士通ETERNUS DX200F的设计初衷是实现针对大数据的快速响应和处理。因此,ETERNUS DX200F在性能上的表现十分突出。在富士通另一款经典的入门级存储系统ETERNUS DX200 S3的基础上,富士通设计了ETERNUS DX200F,标配固态硬盘(SSD),最多可扩展至24个SSD。它拥有多个高速接口,包括16Gb/s FC和10Gb/s iSCSI。

  由于全部采用了SSD,ETERNUS DX200F的处理速度极快,响应时间也更短,可以有效缩短数据批处理的时间。与全部使用磁盘的ETERNUS DX200 S3相比,在同样的性能下,ETERNUS DX200F可减少90%的耗电量,最多节省50%的占地空间。

  除了高性能这点能够更好地满足大数据的处理需求以外,ETERNUS DX200F还在其他多个方面进行了改进和创新。比如,ETERNUS DX200F具有复制数据功能,并且支持自动精简配置。ETERNUS DX200F秉承了ETERNUS DX系列广受好评的高可靠性技术,控制器、电源等主要组件也进行了冗余处理,即使发生故障,也可以在线更换组件而不会使业务中断。与富士通存储管理软件ETERNUS SF 16组合使用,ETERNUS DX200F可以根据业务优先级进行资源分配,实现对整体存储环境的高效管理。

  如今,大数据已经在很多行业得到了应用,尤其是在风险预测、成本控制、市场预测等方面起到了非常重要的作用。富士通利用大数据,在完善社会基础设施和实现企业精准化营销方面取得了突破。为了帮助企业用户善用大数据,富士通推出了大数据一体机MHA。MHA是一个软硬件一体化的大数据管理分析平台,开箱即用,内置高安全、高可用机制,具有高度优化、平滑扩容、快速扩展的特点。

  大数据的处理和分析对IT基础设施提出了新的要求。第一,更好的计算能力。大数据IT基础架构必须具备分布式横向扩展的能力,同时具有更高的计算密度和性能。第二,更好的存储能力。大数据存储平台可以更好地实现存储分层,能够在一个平台上处理结构化与非结构化的数据,并可实现统一管理。第三,大数据一体机可以实现更简单的集成,能够一站式解决基础设施的搭建、调优和集成。富士通大数据一体机MHA正是基于上述原则构建的,它将富士通创新的、高性能硬件与分布式文件系统、并行计算系统、可视化分析软件进行整合,为用户提供了一个更便于使用的大数据处理平台。

  MHA采用专为大数据进行优化的硬件,包括主控核心节点、集群扩展节点、数据存储和归档平台ETERNUS DX S3等,使得整个硬件平台具有更高的可靠性和更高的计算和存储密度。在软件方面,MHA主要包括基础数据层软件和统计挖掘层软件两大部分。分布式数据分析挖掘软件属于基础数据层软件。统计挖掘层软件包括内存数据分析加速软件、实时并行数据库、分布式数据备份软件等。

  目前,富士通大数据一体机MHA主要应用于分布式数据分析挖掘、实时内存数据仓库、内存数据分析加速和数据分析可视化四大领域。在大数据方面,富士通对Hadoop也有很好的支持,比如,基于Apache Hadoop 2.0的富士通大数据基础设施平台包括了基于内存的Hadoop计算、存储一体机和面向业务的Hadoop存储、备份系统。

全闪存阵列为大数据优化

时间: 2024-10-16 23:44:50

全闪存阵列为大数据优化的相关文章

2014全闪存阵列市场第一花落谁家?

传统存储市场由于经过多年竞争,市场格局早已走向稳定,而在以全闪存阵列为代表的新兴存储细分领域中,则呈现出一派繁荣景象,参与市场竞争者之多.创新产品之丰富远超传统存储市场.就连市场份额第一的宝座也在最近几年中多次易主,ViolinMemory.IBM等公司轮番坐庄,并没有出现绝对的王者.临近年底之际,2014年全闪存阵列市场第一的宝座再次引起业界的关注.EMC公司率先透露其过去三个季度的全闪存阵列业务营收情况,在EMC看来,2014年全闪存阵列市场第一的宝座已经非他莫属. 2014:市场竞争激烈

Memblaze明年进军全闪存阵列市场

大数据在线报道:近日,在国内一场闪存应用小型沙龙活动中,Memblaze联合创始人.总经理殷雪冰透露公司将于明年年底正式推出其全闪存阵列产品,此举意味着Memblaze即将涉足竞争激烈的全闪存阵列市场.Memblaze为国内一家专注在PCI-E闪存卡的初创企业,近年来已经获得多轮投资,在今年八月完成的最新一轮融资中,贝塔斯曼亚洲投资基金.中兴合创.鼎兴基金.英菲尼迪等投资机构共投资2000万美元,其PCI-E闪存产品已经获得了包括百度.阿里.腾讯等大型互联网公司的青睐与使用. 根据殷雪冰透露,M

EonStor GSa 2024 全闪存阵列获得国际权威媒体的五星级认可

EonStor GSa 2024 全闪存阵列获得国际专业IT杂志的五星好评,斩获编辑选择大奖. 这家媒体的资深存储专家对EonStor GSa 2024 全闪存阵列给出了这样的评语:"EonStor GSa 2024RC 功能齐全,不仅提供丰富多样的数据存储服务,更具备优异的全闪存存储性能.巨大的存储空间扩展能力,以及多种规格的数据传输端口."GSa 2024为统一存储,具备双冗余控制器 (dual-redundant controllers) ,以及 24 个热插拔 (hot-swa

IBM全闪存阵列--FlashSystem(Data Protection)

一.Flash Technology 上一篇文章<IBM全闪存阵列--FlashSystem(1)>提过要了解plane,chip是什么意思,去看下这篇文章-http://www.cnblogs.com/heiyue/p/3436349.html.这里我再贴出来科普下. 上图是一个8Gb 50nm的SLC颗粒内部架构,每个page有33,792个存储单元,每个存储单元代表1bit(SLC),所以每个page容量为4096Byte + 128Byte(SA区).每个Block由64个page组成

IBM全闪存阵列--FlashSystem(1)

上个月参加了上海这边存储微信群线下交流,来自HP的产品经理辉哥给大家介绍了HP的存储产品,会议主要围绕全闪存阵列.(PS,这里不得不佩服辉哥的表达能力以及知识圈,对各家产品的优劣势是如数家珍)."闪存阵列"这个词对于我还是有点陌生,我对它的第一印象是"分层存储".这不回来之后恶补下,不然跟不上时代了. ================================================================= IBM在2012年收购企业级闪存厂

中国闪存论坛演讲报告——全闪存阵列技术

今年10月份的时候参加中国闪存论坛,并有幸通过分论坛演讲的形式和很多朋友一起分享了闪存存储技术.最近一段时间一直在从事闪存存储系统方面的研发,从产品.市场.应用和技术的角度对闪存存储进行过深入的思考,思考之后越发觉得存储的未来在于闪存或者严格意义上说在于半导体介质.这种新型介质的引入,对存储系统的研发.应用都产生了革命性的变化.传统存储技术不能直接满足新介质的需求:新介质的引入对存储技术提出了很多新的技术需求.所以,当下的这几年是闪存存储技术变革的几年,通过变革年代的技术积累.产品开发.应用,将

FC比FCoE更能发挥全闪存阵列性能

博科的一项研究称全闪存阵列使用FC能够提供比FCoE更高的效率.FCoE做全闪存阵列的接口是为了能够使得运行FC的全闪存阵列能够方便的与以太网想结合.但是博科资助的 Evaluator Group的研究员做了一个实验,实验内容主要是研究全闪存阵列与刀片服务器相连时,16Gb/s 的FC和FCoE在带宽.延迟等指标上的差异.他们的研究结果如下: 单个的16Gb/s FC比两个10G以太网连接的效率要搞. 在SAN工作负载占用资源超过80%时,FC能够提供2倍到10倍于FCoE的速度性能 比起FCo

Infortrend全闪存阵列GSa 5000, 数据中心的一场“完美风暴”

EonStor GSa 5000系列是专为数据中心设计的全闪存统一存储阵列,具有超高性能.搭载Intel Xeon E5 8核处理器,块级IOPS可以达到700K,OLTP IOPS 也可以达到300K,同时响应时间保持在0.5毫秒以下. 而且GSa的固件EonOne嵌入了智能硬盘恢复(IDR)以及SSD寿命监控功能,确保数据的可用性.集成的Cloud Storage Gateway功能可以轻松与主流的云服务(例如,Amazon S3.Microsoft Azure.阿里云)集成,实现容量扩展.

闪存阵列可以替代传统SAN

IBM预计,2017年,I/O密集型存储市场的规模大约为70亿美元.IBM今年推出的FlashSystem V840就是专为这一市场打造的.IBM认为,在这一市场上,闪存优化型解决方案有机会替代传统的SAN存储. Gartner的报告显示,到2017年,全球闪存阵列市场收入预计将达到2014年的5倍.闪存阵列市场已成为主流存储系统厂商的必争之地,IBM当然也不例外. 2014年6月,Gartner发布的<2013年全球固态硬盘和闪存阵列市场报告>显示,IBM按营收计算在闪存阵列市场占据25%的