2013年10月29日存储在线原创:一个公司的诞生对整个IT业界都是一次大大的刺激与促进,对于这样一家定位下一代云计算和大数据应用相结合的公司,倾注了老乔(Joe Tucci)为首的EMC高层决策团的睿见与前瞻。
从当初成立伊始将VMware前任CEO、EMC首席战略官Paul Maritz换将到Pivotal,EMC和VMware共同出资成立的公司(通用电气也有1.05亿美元左右的战略投资)被国内媒体业界誉为EMC集团军的三驾马车之一。(另两驾马车:软件定义数据中心的VMWare和信息基础架构的原EMC)
“据Paul Maritz透露,2013年Pivotal的销售收入预计为3亿美元,2017年有望达到10亿美元。同时2013~2014年Pivotal将获得约4亿美元的投资。” Pivotal在既定目标的推动下,近来也传出“忙于打造大数据软件组合”——组合数据挖掘和数据分析软件产品。
作为下狠心要锻造自己的业务智能PaaS(平台即服务),Pivotal在大数据软件方面也强调如何有助于数据分析。大家都熟知的,内存数据库技术的应用,可以大大提高数据库的速度,这对于需要高速反应的数据库应用,如电信、金融等提供了有力支撑。因此,在内存数据库的实时分析领域,就成为当前在配合Hadoop平台数据处理方面带来很大的方便。
我们可以简单了解一下内存数据库的价值所在,“内存数据库的技术,一个很重要的特点,是可以对内存中的数据实现全事务处理,这是仅仅把数据以数组等形式放在内存中完全不同的。并且,内存数据库是与应用无关的,显然这种体系结构具有其合理性。内存引擎可以实现查询与存档功能使用的是完全相同的数据库,同时内存表与磁盘表也使用的是完全相同的存取方法。存储的选择,对于应用开发者而言是完全透明的。”
相关资料显示:对于内存数据库而言,实现了数据在内存中的管理,而不仅仅是作为数据库的缓存。不像其它将磁盘数据块缓存到主存中的数据库,内存数据库的内存引擎使用了为随机访问内存而特别设计的数据结构和算法,这种设计使其避免了因使用排序命令而经常破坏缓存数据库性能的问题。通过内存数据库,减少了磁盘I/O,能够达到了以磁盘I/O 为主的传统数据库无法与其相比拟的处理速度。
显然,内存数据库在解决实时处理和高并发问题上,其意义还是非常大的。
作为Hadoop发行版升级Pivotal HD 1.1的一部分,其中还包括内存交易库GemFire HD(就是VMware在2010年收购的)。据其他媒体介绍,“GemFire实例完全是在服务器内存中运行的,这样可以迅速询问实时SQL操作数据,对于情况感知和其他形式的实时分析都是有用处的。”
另外,在新加坡的首届Pivotal峰会上,Pivotal还在推出了帮助数据工作者发现和准备数据用于分析的工具——Pivotal Data Dispatch(Pivotal DD)。Pivotal DD是一款可扩展、经济实惠的解决方案,可整合查看不同的数据源,为报告和数据分析提供自助式沙箱配置。企业现在可以快速、安全地提供任何数据源,无论是Hadoop、MPP、平面文件还是传统数据库的结构化和非结构化大数据,使数据工作者能够实现前所未有的数据分析高产出。采用Pivotal DD,企业就有了一个全面的系统,可以查看、管理和分析组织内部及外部数据,更快做出决策,为企业开发出关键的数据洞察。
不过,据介绍,Pivotal Data Dispatch软件的基础是由纽约证券交易所(New York Stock Exchange,NYSE)开发的,从2007年开始他们的数据分析师利用这款软件更好地了解监管要求带来的影响,也旨在为满足监管要求而跨多种数据架构进行高级数据访问和分析。经过与NYSE科技公司协调,Pivotal已经将这个先进的基础软件纳入一个称为Pivotal Data Dispatch的商业产品,以满足Pivotal企业客户群日益增长的数据需求。
有媒体对此评论道:“Pivotal DD为大数据和分析扫清了障碍,通过自助式数据发现和访问提高速度。通过统一访问控制、增强策略和审计功能提高安全性与合规性。通过减少IT参与稳定成本,管控租用沙箱导致的数据增长,提高效率。”
查阅资料发现,Pivotal DD还提供如下功能:
统一数据平台:这是一个不同数据平台的目录,使IT部门能够注册数据平台、定义业务元数据、建立安全和访问规则并执行各种政策。
面向Hadoop及其他系统的数据管理:快速访问企业数据池——一种电子文件图书馆和数据库系统。系统还可以包括基于Hadoop的平台、数据网格和高速缓存服务、MPP专用设备、信息队列以及内部或外部云。
自配置:建立按需分析沙箱和规定时间的数据租用,所规定时间由数据工作者和数据经理设置。
安全与访问控制:单一元数据库用于实现统一访问、安全性、谱系追踪以及IT管理员的可审计性。
再者,从另一个方面分析,“目前用Hadoop的企业为数不多。但我们可以感受到,有些企业已经先行。”Pivotal全球业务发展与策略副总裁David Menninger早已认识到这一点,实际上,在国内几次有关Hadoop的大会现场与会者爆满就可以看出国内企业用户对于Hadoop技术的关心与专注度。
相关数据显示,Pivotal现有1200人,700人都是工程师,在面临下一代云计算和大数据应用相结合的道路上,Pivotal 已经在步步抢先,阿明相信它未来将会做得更好。
也如David Menninger 所言:“Pivotal 代表着转变,新时代需要新平台。” 因此,我们不得不看好未来的Pivotal。(阿明)