项目背景
武汉大学是教育部直属国家“985工程”和“211工程”重点建设高校,是国内技术实力强、影响力巨大的技术研究、高等教育机构。
作为一所综合性研究型大学,其本身的学科设置与事业发展对于科技的需求正在日益突出。尤其是随着对海量计算需求的快速增加,现有的研究项目和不断增加的用户群体对于高性能计算能力的需求更加迫切。武汉大学计算机学院2006年建成2.3万亿次的高性能网格系统,但是,随着计算机计算能力的飞速发展和人们对海量计算需求的快速增加,现有的系统访问量巨大且应用高峰期频频出现,存储系统空间和性能严重不足,已无法满足目前的需求。立足于国家与院校的发展需求,武汉大学急需一套既能满足不断增加的高性能计算的存储需求,又能响应国家对于“十二五”规划中节能减排目标的绿色存储系统方案。同时,还需要充分利用现有存储系统,而且新旧网格系统的后台存储系统在硬件结构上有明显差异,需要一个方案能够将新旧系统融合,实现新老系统统一管理、统一调用,满足科研与教学不断增长的存储需求。
方案介绍
高性能计算的IO并发读写量巨大,对存储的容量和性能需求惊人,曙光公司结合武汉大学的现状需求以及节能目标,为其设计了一套完善的高性能存储解决方案,这套方案采用曙光ParaStor并行存储系统,充分利用了存储与网络技术的最新发展成果,在提供高性能存储系统的同时,能够将武汉大学的新旧高性能计算机系统的后台存储系统整合,实现所有存储的统一全局命名空间和并发访问。
ParaStor并行存储系统的全局命名空间为所有客户端提供了有效的、全局唯一的、目录树,从而保证多台主机可以同时对磁盘进行读写操作。同时,在存储单元LUN条带化的基础上,将文件数据条带化分布到多个硬盘上,为数据提供多个并行传输通道,既能进行多个独立的传输,又能通过条带技术减少数据传输时间,从而显著提升了系统性能。
此外,ParaStor并行存储系统针对大文件的读/写和大数据量的传输做了优化,系统的聚合带宽可达几百GB/s,可为集群系统提供全局数据共享环境,多进程和多客户端更有利于体现ParaStor并行存储系统超强的聚合I/O能力。
系统架构图如下所示:
项目总结
本项目的建设,充分利用了曙光存储系统虚拟化技术优势,实现了新旧存储系统的完美整合,解决了武汉大学对于庞大计算量、存储访问量的需求问题,为学校测绘遥感、物理化学、力学、生物及制药、计算机等多个科研任务提供了高性能、高可扩展性的存储系统。同时,此项目的成功实施,也将曙光公司倡导的“绿色教育、节能未来”的理念运用到教育行业。