首页 > 代码库 > 全闪存阵列为大数据优化

全闪存阵列为大数据优化

为了更好地支持大数据应用,富士通推出了针对大数据进行优化的全闪存阵列和大数据一体机,在保证整个系统高性能和高可靠的前提下,进一步提升了数据处理和分析的效率。

  大数据是继云计算之后又一项将改变传统商业模式和IT应用方式的重要变革。从存储的角度看,富士通正逐渐将产品的重点向大数据倾斜,近日推出了最新的全闪存阵列ETERNUS DX200F和面向大数据的一体机MHA。

  全闪存阵列ETERNUS DX200F是一款面向中小企业用户的入门级存储产品。虽然是一款入门级的产品,但是ETERNUS DX200F在性能上丝毫不逊于中高端的存储产品。SPC-1 Benchmark测试数据显示,ETERNUS DX200F的IOPS值突破了20万,在满负载的情况下,延迟只有0.63ms。

  随着云计算应用逐渐普及、移动设备增加、海量数据快速增长,企业的数据处理工作变得越来越复杂。如何高效、可靠地处理海量的数据,及时地进行数据分析,同时有效地利用数据是摆在企业面前的一个重要课题。在很多企业普遍应用Oracle数据库的情况下,富士通ETERNUS DX200F全闪存阵列的一个核心价值就是提高Oracle RDBMS的存取性能。

  富士通ETERNUS DX200F的设计初衷是实现针对大数据的快速响应和处理。因此,ETERNUS DX200F在性能上的表现十分突出。在富士通另一款经典的入门级存储系统ETERNUS DX200 S3的基础上,富士通设计了ETERNUS DX200F,标配固态硬盘(SSD),最多可扩展至24个SSD。它拥有多个高速接口,包括16Gb/s FC和10Gb/s iSCSI。

  由于全部采用了SSD,ETERNUS DX200F的处理速度极快,响应时间也更短,可以有效缩短数据批处理的时间。与全部使用磁盘的ETERNUS DX200 S3相比,在同样的性能下,ETERNUS DX200F可减少90%的耗电量,最多节省50%的占地空间。

  除了高性能这点能够更好地满足大数据的处理需求以外,ETERNUS DX200F还在其他多个方面进行了改进和创新。比如,ETERNUS DX200F具有复制数据功能,并且支持自动精简配置。ETERNUS DX200F秉承了ETERNUS DX系列广受好评的高可靠性技术,控制器、电源等主要组件也进行了冗余处理,即使发生故障,也可以在线更换组件而不会使业务中断。与富士通存储管理软件ETERNUS SF 16组合使用,ETERNUS DX200F可以根据业务优先级进行资源分配,实现对整体存储环境的高效管理。

  如今,大数据已经在很多行业得到了应用,尤其是在风险预测、成本控制、市场预测等方面起到了非常重要的作用。富士通利用大数据,在完善社会基础设施和实现企业精准化营销方面取得了突破。为了帮助企业用户善用大数据,富士通推出了大数据一体机MHA。MHA是一个软硬件一体化的大数据管理分析平台,开箱即用,内置高安全、高可用机制,具有高度优化、平滑扩容、快速扩展的特点。

  大数据的处理和分析对IT基础设施提出了新的要求。第一,更好的计算能力。大数据IT基础架构必须具备分布式横向扩展的能力,同时具有更高的计算密度和性能。第二,更好的存储能力。大数据存储平台可以更好地实现存储分层,能够在一个平台上处理结构化与非结构化的数据,并可实现统一管理。第三,大数据一体机可以实现更简单的集成,能够一站式解决基础设施的搭建、调优和集成。富士通大数据一体机MHA正是基于上述原则构建的,它将富士通创新的、高性能硬件与分布式文件系统、并行计算系统、可视化分析软件进行整合,为用户提供了一个更便于使用的大数据处理平台。

  MHA采用专为大数据进行优化的硬件,包括主控核心节点、集群扩展节点、数据存储和归档平台ETERNUS DX S3等,使得整个硬件平台具有更高的可靠性和更高的计算和存储密度。在软件方面,MHA主要包括基础数据层软件和统计挖掘层软件两大部分。分布式数据分析挖掘软件属于基础数据层软件。统计挖掘层软件包括内存数据分析加速软件、实时并行数据库、分布式数据备份软件等。

  目前,富士通大数据一体机MHA主要应用于分布式数据分析挖掘、实时内存数据仓库、内存数据分析加速和数据分析可视化四大领域。在大数据方面,富士通对Hadoop也有很好的支持,比如,基于Apache Hadoop 2.0的富士通大数据基础设施平台包括了基于内存的Hadoop计算、存储一体机和面向业务的Hadoop存储、备份系统。

本文出自 “郭涛的存储世界” 博客,请务必保留此出处http://gtstorageworld.blog.51cto.com/908359/1535634