大数据带来IT大挑战 安全整合是关键
论坛 发表于:12年09月13日 10:00 [转载] DOIT.com.cn
当社交网络兴起,移动互连快速发展,数据传感器的大量应用以及云计算带来了新一轮的数据大集中,在这个时代“数据”出现了爆炸式的增长。据统计,2011年中国移动互联网用户数已经达到3.5亿,预计今年可能会突破5亿;目前全球大概已经有1万亿台联网的设备;在过去十年间,全球服务器增加两倍,如今全球服务器数量已达到3190万台;2012年的数字化数据已经达到2.7 ZB,比2011年增加48%...如今,数字宇宙中的数据不仅庞大,而且种类多样,增长快速,“大数据”时代已经来临。
“数据里面有黄金”
继云计算之后,大数据成为时代最为前沿的话题。越来越多的企业开始进行大数据的研究,而传统的IT厂商们也纷纷开始将重心投向大数据领域,试图在这一新的契机中占领先机。那么,大数据到底是什么,又为何独具魅力?虽然目前业内对于大数据还没有一个标准的、教科书式的定义。但对于大数据普遍描述大致有着以下几种:海量的数据;大量增长的交易数据;需要存储并进行监管的数据;爆炸的新数据来源等等。对于大数据中“大”的理解,主要有两个方面,第一种是指大量的、快速增长的数据,第二种则是数据中所蕴含的大的价值和洞察。
对于大数据的第二点普遍认知让大数据变得炙手可热,“数据里面有黄金”,这让大数据充满了诱惑力。麦肯锡全球研究机构在2011年5月发布的《大数据:创新、竞争和生产力的下一个前沿领域》中表示,充分利用大数据可帮助全球个人定位服务提供商增加1000亿美元收入、帮助欧洲公共部门的管理每年提升2500亿美元产值、帮助美国医疗保健行业每年提升3000亿美元产值,并可帮助美国零售业获得60%以上的净利润增长。麦肯锡认为,数据逐渐成为重要的生产因素,人们对于海量数据的运用将预示着新一波生产率增长和消费者盈余浪潮的到来。
从大数据中挖掘出有用的信息能够帮助企业做出更加正确的决策,分析师认为,企业决策应当更加依靠于数据而不是经验,虽然大数据中非结构化数据要占到大多数,但其中蕴藏着大量有关客户行为和业务运营等重要信息,能够创造巨大的商业价值。最早对大数据感兴趣的是金融业,而后零售、电信、房地产等行业也纷纷发布出利用大数据的成功案例,例如某国际零售巨头通过消费者购买行为的分析,成功提高商品的销量;又如房地产业,从搜索引擎反馈的消费者对房市的搜索结果,甚至能够预测到楼盘的销量。
大数据是把双刃剑
凡事都有两面性,大数据也不例外。
大数据为企业、IT厂商们带来巨大机会的同时,也给企业带来了前所未有的挑战,特别对于IT基础架构而言。数据的快速增长让企业IT基础设施更加庞大而且难于管理,随之而来的还有信息难于整合共享以及能耗的不断飙升。据统计,过去十年间,服务器数量增加2倍,虚拟机数量增加了42%;过去5年间,服务器能耗增加了2倍;自2000年来,安全漏洞增加了8倍。故而,在享受大数据所带来带来的甜饼之前,企业首先要处理好IT基础架构所面对的难题,否则在探索大数据的道路上难免会出现各种障碍。
虽然大数据中蕴含着大价值,但企业想要在大数据中受益,首先数据要“大”,换句话说,目前来看,大数据还并不是适合每一家企业和每一种行业,它更适合那些具有大量的、快速增长数据的企业。就像在沙堆中发现金子,沙堆大了,发现金子的几率也就更大,如果刻意的去从沙堆中寻找金子,金子未必有,即使找到了,所耗费的人力物力也许比金子的价值还要大。比较典型的,金融、零售、电信、房地产、大型电子商务公司等涉及大量数据的企业,也许能更早在大数据中获益,同时,这些企业IT基础架构中的挑战也会更早的浮现出来。
例如电信行业,随着移动互联网的快速发展,电信需要迅速扩大IT基础架构来支撑新业务及不断增加的负载,这就导致服务器蔓延,机房空间快速减少,能耗的开销甚至要达到运营成本一半;同时,由于数据中心服务器架构、配置、操作系统的多样性,运营难度不断提高。在卫生行业,IT基础架构要支撑电子病历和健康档案等文字图像的存储和查询,由于电子病例是要跟踪患者一生,基础数据在以每年30%的速度增长;越来越多的跨地区转诊会诊,需要数据的大集中以提供统一的数据视图。