云存储是对云计算的延伸和发展,是一种将存储资源配置为按需分配、基于网络的资源池,具备服务能力,支持灵活的网络数据访问协议,能够实现基于智能策略技术的自动化资源管理,并通过虚拟化技术实现性能扩展和灵活的空间扩展。
华为CloudStor CSS云存储系统是自主研发的、业界领先的云存储产品,满足海量、快速增长的数据存储需求。CloudStor CSS 是集通用硬件平台、先进的分布式软件和智能管理功能于一体的云存储系统,具有高可靠性、高性能、高扩展性等特点。
主特性
|
子特性
|
描述
|
分布式文件系统
|
系统规格
|
系统容量
|
系统最大可管理128个域空间,总物理容量最大为185PB
|
单域容量
|
单域最大可支持22个存储节点,总物理容量最大为1.45PB
|
单域带宽
|
单域最大读写带宽为5.6GB/s,最大写带宽为4GB/s
|
客户端
|
单域支持客户端的最大数量为64个,系统最大支持8192个客户端
|
文件数
|
单域最大支持12亿个文件
|
文件系统功能特性
|
系统架构
|
采用分布式非对称对象存储架构
|
文件和目录管理
|
支持文件和目录的基本操作,包括文件的打开、关闭、读、写等,目录的创建、删除、修改等
|
协议支持
|
支持标准POSIX文件接口
|
文件大小
|
单个文件大小最大为2TB
|
数据迁移
|
支持域内节点间数据迁移
|
重复数据删除
|
支持基于Namespace的重复数据删除及重删相关策略设置
|
负载均衡
|
支持存储节点间基于性能和容量的负载均衡
|
精简配置
|
基于文件系统精简配置,按照实际使用容量分配空间
|
客户端兼容性
|
客户端(POSIX)
|
支持SUSE linux 10 sp1、SUSE linux 10 sp2、SUSE linux 11 sp1、RHEL 5
|
NFS客户端
|
支持 SUSE 10 sp2、SUSE 11 sp1
|
CIFS客户端
|
支持 Windows 2003、Windows 7
|
分布式数据库
|
系统规格
|
系统容量
|
系统最大可管理8个域空间,总物理容量最大为2.816PB
|
单域容量
|
单域最大可支持16个存储节点,总物理容量最大为352TB
|
单域最低配置
|
1个管理节点、3个存储节点、2个交换单元,元数据服务以及数据服务均部署在该存储节点上
|
单域性能
|
在最低配置下,表索引不超过3个时,单节点插入性能不低于2万笔/秒(无副本,有副本时为2万/(N+1),N表示副本个数)
|
客户端连接数
|
单域支持的客户端连接数为64,系统最大支持数据库个数为512
|
事件保存个数
|
单域可以保存10万条事件,系统最大可以保存80万条事件
|
数据库功能特性
|
SQL语法
|
兼容SQL-92规范语法,支持数据库创建/销毁、表创建/销毁、索引创建/销毁、数据查询、插入
|
对外接口
|
支持JDBC、ODBC接口;并且可以SDK的形式,提供数据的增、删、改、查接口
|
数据压缩
|
提供数据表级别的数据压缩,最大压缩比为7:1
|
公共特性
|
可靠性
|
磁盘级数据保护
|
支持节点内数据保护,某个磁盘发生故障,可通过该节点其它磁盘实现数据的恢复
|
节点级数据保护
|
支持节点间RAID,某个节点发生故障,可通过其他节点实现数据的恢复
|
元数据可靠性
|
支持节点内RAID6,支持域内元数据节点A/P方式
|
可扩展性
|
硬盘
|
支持硬盘的在线增加和移除
|
存储节点
|
支持存储节点的在线增加和移除
|
域空间
|
支持域空间的在线增加和移除
|
可维护性
|
自动部署
|
支持软件平台自动化部署和配置
|
在线升级
|
支持在线升级,且用户读写业务不中断;升级过程不影响系统配置和日志、告警、用户保存的数据
|
状态监控
|
支持系统总体和各节点设备的运行状况监控
|
性能监控
|
可以进行性能监控,包括读写性能、IO性能、网络带宽等
|
资源监控
|
支持系统资源的动态跟踪(包括磁盘空间、CPU、内存、网络流量、文件系统)
|
设备发现
|
支持指定IP、指定网段和子网内发现设备及自动发现新的设备
|
查询
|
支持标准数据节点上信息分布情况、系统的状态、性能、资源信息及文件和目录的查询
|
支持过滤查询
|
日志
|
支持多级别、多类型日志记录
|
支持日志导出、格式转换和自动保存功能
|
支持远程日志的收集、整理和分析,支持一键收集日志和故障信息
|
远程维护方式
|
支持SSH方式及Web方式的远程维护,支持远程日志收集
|
告警
|
支持界面告警和多种方式的远程告警,包括短信告警、邮件告警等
|
权限管理
|
支持三种级别管理用户(超级管理员用户、管理员用户和普通用户);支持用户分权分域管理
|
数据库特性
兼容SQL-92规范语法
支持常用的统计分析查询(Group、Sort)
支持多表的连接查询(Join)
支持JDBC、ODBC接口
特有的数据压缩技术,通过对应用透明的压缩方式,节省存储空间,提高资源利用率,压缩比最高可达7:1
文件系统特性
支持POSIX、NFS、CIFS、FTP等访问协议
高可靠,高可用性
Erasure code(节点间RAID)技术,每域(<22节点)最大支持同时3个节点66块数据盘故障,对业务主机完全透明。
全冗余硬件设计,无单点故障,确保“五个9”(99.999%)的可用性,保障业务系统7×24 小时的持续可用
硬盘预拷贝技术,提前发现即将故障的硬盘,主动迁移故障盘数据,规避系统降级的风险,有效降数据丢失的风险
硬盘坏道修复技术,最大限度修复硬盘坏道,将硬盘故障率降低50%以上,延长硬盘的可使用周期
高性能,高扩展性
利用纯SSD Raid组加速元数据访问,将大幅提高系统性能。
分布式架构确保标准存储节点和元数据节点无瓶颈,文件多节点并发访问,并每节点提供32GB系统分布式缓存
随着CSS系统中节点的增加,性能呈线性增长,单域吞吐量达到数GB/s,系统最大吞吐量能够达到数百GB/s,存储容量增长超过100PB。
支持基于容量和性能的负载均衡,根据物理资源(CPU、缓存、网络 I/O 带宽和磁盘 I/O 带宽)进行均衡的数据迁移,保持系统性能和容量保持平衡,可适合于具有极高性能要求的计算群集。
支持在线部件热插拔,支持节点增加和减少,对业务主机完全透明,实现真正的在线扩容。
管理简单性和透明适应性
采用一体化方案,管理软件对硬件、网络、数据库服务统一管理
向导式的ISM GUI 管理软件,降低用户管理成本。
灵活的故障告警监控机制,提供邮件、SNMP 和Syslog 日志查询等告警和监控方式,提高维护效率。
自动化的性能统计及智能分析
基于Namespace的重复数据删除技术减少存储容量需求,节约成本并降低管理复杂度