数据存储产业服务平台

大数据的生命:回顾存储2012

这个世界变化太快,数据爆炸式增长带给存储厂商新的发展,在这个环境下,是什么东西给予了大数据生命?相信大数据也有它自己的运作机理,科技厂商、政府、学者、媒体都在推动大数据走向成熟,我们需要做的就是应该按照大数据的发展需求顺应形势,适时制定自己的发展策略。如此以来大数据的运作才能更健康,也能更快的走向成熟。

如果社会是不发展的,自然就没有生机可言,正是因为企业拥有的信息量不断增大,企业面临的形势也时刻在变化,这促成了大数据时代的形成。所以变化应该是大数据生命力的来源,即为大数据的灵魂。

2012的市场尤其适合用变化这一关键词来形容。市场需求和厂商策略两大市场变量可谓是风随火起,火借风势。不管是IBM、EMC等存储巨头,即是小的存储厂商也越来越注重市场需求的变化。所以可以看到的是今年很多存储厂商策略涉及的关键词都是统一存储、一体机、固态存储、融合等等。

大数据的火热也为一批新的产品和技术提供了更广阔的施展空间,这其中,数据库一体机和分布式计算系统Hadoop就是最明显的代表,因为将计算、存储硬件以及应用软件进行集成,在简化部署的同时降低应用和管理难度,一体化集成系统已经成为了各大IT供应商抢占的新高地,主流厂商相继推出面向数据库应用的一体机,包括Oracle三大数据处理集成系统、惠普AppSystem for Hadoop以及IBM的PureData System,而这些集成系统都选择了共同的平台——英特尔x86架构。

主流的大数据处理集成系统中,英特尔x86架构正在成为一种新的标准平台,英特尔至强处理器这一坚实基石也使众多的软硬集成解决方案如虎添翼,并得以彰显最大的威力。另一方面,除了已经成为传统计算领域中的开放标准,英特尔也正在大数据这股新浪潮中打造一个新的标准化硬件生态系统。

数据本来没有什么价值,但是通过特定的算法对海量的数据进行挖掘和分析之后,客户的需求和市场的发展趋势便会明晰起来。数据挖掘和数据分析是从数据变为有价值的信息最终影响决策者决策的途中的关键一环。

数据分析对互联网的改变是巨大的,只是这些改变存在于细节之间。例如hao123,数年之前hao123还只是一个将各类网站汇总的一个页面而已,现在虽然 汇总各类网站仍是其重要的功能,但是现在hao123能呈现实时新闻、当下热门的小游戏等信息,能将当下最受瞩目的信息呈现出来,这就是数据分析的作用。当然hao123只是数据分析的一个缩影,很多业界人士预言将来用户的一次对汽车信息的搜索可能会在下次到超市的时候接收到很多有关汽车用品的推销信息。

物联网:这是一个非常重要的数据来源,大量的传感器给上层决策者提供了第一手的信息。这一层是大数据与自然界接触的第一层,在大数据时代,物联网实 为大数据的五官,为其感知外部世界。 社交网络给企业提供了一个发现客户需求的一个新的途径,越来越多的人开始重视以Facebook为首的社交网络上人们发布的状态给他们带来的信息。 完整Hadoop的技术堆栈包括常用设施、分布式文件系统、分析和数据存储平台,以及管理分布式处理、并行计算、工作流程和配置管理的应用层。

今年的Hadoop跟随大数据的热潮也热了一把,特别是英特尔发布了Hadoop发行版。其中包含Hadoop分布式文件系统HDFS、分布式数据库HBase、分布式计算框架 MapReduce、数据仓库Hive、数据处理Pig、机器学习Mahout商业套件。笔者参加的几个大数据相关的大型论坛也也都是将Hadoop和大数据结合进行讨论的。

时间长了,企业运维难免出现意外,备份一直以来是企业应对数据丢失、服务器宕机等问题的主要手段。数据的暴增、宕机、设备性能无法赶上需求步伐等问 题困扰着每位决策者。一次服务器的意外宕机可能使公司停止数小时运作或是丢失大量客户资料。应该说灾难的不可避免催生了备份市场的繁荣。

今 年的灾备市场应该给以改革和发展两个关键词,改革是备份厂商纷纷调整策略适应新的市场需求,赛门铁克推出备份一体机、CommVault推出“147”数 据管理解决方案应该都是数据保护里面非常具有代表性的事件。而发展则是国内备份市场的发展,爱数、和力记易、火星高科等备份厂商都积极应对当前的市场需 求,国产备份在今年讨论的非常多。

从单个的PC到数据中心再到Internet,网络思想可谓无处不在,大数据时代单个的节点上已经很难应对企业的需求,网络存储应该是存储应对大数据绝佳策略。而各种适配卡则是网络中不同设备或是组件之间协调的交点。适配卡使得存储网络更具扩展性和灵活性。

随着Emulex 16G FC光纤通道HBA卡的推广,适配卡市场朝着更快的速度、更稳定的性能、更丰富的产品以及更高的虚拟化几个方向发展。Adaptec by PMC 7系列、LSI Syncro都称得上适配器市场上的亮点。适配器作为对设备性能的扩展和提升工具正朝着更快、更稳、更多样化的方向发展。

高端存储和低端存储犹似双脚将大数据与企业实际情况对接,毕竟对于企业而言,大数据未免过于空泛。具体的系统构建策略还是应该有具体的解决方案支持的。所以当前众多厂商均针对不同层级客户划分高中低三条产品线以适应企业的具体需求。

由于中小企业的数量剧增,国内SMB存储市场今年尤为火热。EMC、惠普、NetApp、Dell都非常重视SMB市场的发展,IBM的V3500和V3700的发布更是中低端存储市场上不可不提的产品。中高低三个存储市场对存储系统有着各异的需求,针对不同的企业规模发展不同的产品线无疑是使自己的发展理念落地的绝佳策略。

数据应该是大数据的基本组成单元,所以应该说数据是大数据生命体的血肉,不管是数据中心还是存储网络以至云,都需要大量的硬盘、闪存以及磁带作为底层的存储介质。 数据以及硬盘、闪存和磁带是大数据的血肉。

闪存市场上Violin、Fusion—IO等闪存厂商表现比较抢眼,另外EMC推出的全闪存阵列,英特尔、三星、华为的SSD产品以及IBM对TMS的收购都是都体现了固态存储的强大生命力。另外传统硬盘市场经过几十年的发展只剩希捷、西部数据和东芝三足鼎立。

未经允许不得转载:存储在线-存储专业媒体 » 大数据的生命:回顾存储2012