大数据的时代的到来,在未来象征着数据将成为新的资产的类别,就像货币和黄金一样那么宝贵。根据IDC的预测,中国大数据技术与服务市场将会从2011年的7760万美元快速增长到2016年的6.16亿美元。
IDC中国的企业级系统与软件研究部的经理潘永花表示, IDC认为整个大数据的技术和服务含盖了四个层面。最下面是基础架构层,主要涉及了硬件的产品,包括服务器、存储、网络相关的产品,上面三个其实和软件更相关些,包括结构化数据管理,非结构化数据管理,分析挖掘这个层面帮助用户发掘更多的价值,最上层决策和自动化流程,实际上是和企业用户的业务更加的结合的紧密,其中会有行业的特征,与企业的业务流程相关的特征。
存储和内存计算最为引人关注
在IDC最新的调研结果表明,从产品和技术的需求方面,最关注的是和存储相关的产品,主要是因为数据的来源越来越多,种类也越来越多,使得大家首先面临的问题便是和存储相关。
从技术的角度来说,对于内存计算这种新兴的技术非常感兴趣,企业对于数据处理的高要求,那么内存价格的不断下降,内存计算技术也在大量普及。还有软硬一体机的解决方案,最主要的是处理了数据性能的问题。
对于大数据的投入和回报时间,大家希望6个月到两年左右的时间拿到投资汇报。对于大中国区的用户来看,IDC的调研显示接近50%的用户不知道平均回报的周期有多长,这也是分析类的项目在中国还处于比较低的阶段,原因主要在大家对于大数据的认识处在初步的阶段,也希望看到更多的成功案例。
大数据发展的阻碍因素:产品和人才
用户希望非常有效的管理结构化和非结构化的数据,因为结构化的数据相对来说比较传统,但是非结构化的数据目前一个是产生的速度,一个是量增长的太快。大数据相关人才的欠缺将会成为影响大数据市场发展的一个重要因素。
另外一个因素就是大部分用户认为目前大数据的产品还是不够成熟,另外也是缺乏相应的成功的案例,也会阻碍大家来使用大数据的一些新的应用技术。
互联网公司应用最广泛
大数据应用目前仍然还处在早期发展阶段。互联网公司使用的更为广泛,它们主要基于开源软件开发大数据应用,电信和银行也开始对大数据应用产生浓厚的兴趣。
Hadoop在大数据中扮演重要角色
Hadoop /MapReduce 生态系统将会在大数据应用发展中扮演重要的角色。使用Hadoop技术的初创公司层出不穷。大厂商都在加强对Hadoop技术的支持。但未来大数据世界将会是一个多元世界,多种技术将会并存。
部署大数据的建议
IDC中国的企业级系统与软件研究部的经理潘永花在最后给用户提出了一些部署大数据应用的建议。
第一,用户其实需要认识到企业自己本身的数据管理的现状以及挑战,并且认识到正确的信息对它的业务有多么重要。
第二,如果一个企业要制定这种大数据战略的话需要评估多个层面的需求,包括决策层、基础设础,还有最关键的数据质量问题,会影响最终的分析的结果和整个数据的价值。入手的时候,可以从非关键型业务开始。
第三,大数据技术不仅仅是Hadoop平台,将来它依然实际上会多种平台并存,除了传统的关系数据库依然还会存在,也有一些其他的数据库。未来还会有很多新的平台出来,目前没有哪家占主要的地位。用户还要基于自身的大数据战略来决定采用开源还是其他软件。
第四,大数据应用不应该仅是分析型的应用,像交易型应用,信息访问型的应用都可以利用大数据平台。