OceanStor CSS
华为CSS云存储系统产品是一款集先进的分布式技术、智能化的资源调度能力和管理能力于一体的分布式系统平台(含分布式文件系统和分布式数据库)。它具有 高性能、大容量、弹性扩展、自动化管理等特点,可以满足文件服务和备份、流媒体、数字化视频监控、行为分析、日志监控、历史数据检索、数据挖掘等领域的应 用,可广泛应用于政府、企业、教育、电信、广电、互联网等行业。
华为CSS云存储系统产品是一款集先进的分布式技术、智能化的资源调度能力和管理能力于一体的分布式系统平台(含分布式文件系统和分布式数据库)。它具有高性能、大容量、弹性扩展、自动化管理等特点,可以满足文件服务和备份、流媒体、数字化视频监控、行为分析、日志监控、历史数据检索、数据挖掘等领域的应用,可广泛应用于政府、企业、教育、电信、广电、互联网等行业。
| 主特性 |
子特性 |
描述 |
| 分布式文件系统 |
系统规格 |
系统容量 |
系统最大可管理128个域空间,总物理容量最大为291PB |
| 单域容量 |
单域最大可支持16个存储节点,总物理容量最大为2.2PB |
| 单域带宽 |
单域最大读带宽为4.6GB/s,最大写带宽为3.5GB/s |
| 客户端 |
单域支持客户端的最大数量为64个,系统最大支持8192个客户端 |
| 文件数 |
单域最大支持12亿个文件 |
| 文件系统功能特性 |
系统架构 |
采用分布式非对称对象存储架构 |
| 文件和目录管理 |
支持文件和目录的基本操作,包括文件的打开、关闭、读、写等,目录的创建、删除、修改等 |
| 协议支持 |
支持标准POSIX文件接口 |
| 文件大小 |
单个文件大小最大为2TB |
| 数据迁移 |
支持域内节点间数据迁移 |
| 重复数据删除 |
支持基于Namespace的重复数据删除及重删相关策略设置 |
| 负载均衡 |
支持存储节点间基于性能和容量的负载均衡 |
| 精简配置 |
基于文件系统精简配置,按照实际使用容量分配空间 |
| 客户端兼容性 |
客户端(POSIX) |
支持SUSE linux 10 sp2、SUSE linux 11 sp1、RHEL 5.2、CentOS 5.4 |
| NFS客户端 |
支持 SUSE 10 sp2、SUSE 11 sp1 |
| CIFS客户端 |
支持 Windows 2003、Windows 7 |
| 分布式数据库 |
系统规格 |
系统容量 |
系统最大可管理8个域空间,总物理容量最大为2.816PB |
| 单域容量 |
单域最大可支持16个存储节点,总物理容量最大为352TB |
| 单域最低配置 |
1个管理节点、3个存储节点、2个交换单元,元数据服务以及数据服务均部署在该存储节点上 |
| 单域性能 |
在最低配置下,表索引不超过3个时,单节点插入性能不低于2万笔/秒(无副本,有副本时为2万/(N+1),N表示副本个数) |
| 客户端连接数 |
单域支持的客户端连接数为64,系统最大支持数据库个数为512 |
| 事件保存个数 |
单域可以保存10万条事件,系统最大可以保存80万条事件 |
| 数据库功能特性 |
SQL语法 |
兼容SQL-92规范语法,支持数据库创建/销毁、表创建/销毁、索引创建/销毁、数据查询、插入 |
| 对外接口 |
支持JDBC、ODBC接口;并且可以SDK的形式,提供数据的增、删、改、查接口 |
| 数据压缩 |
提供数据表级别的数据压缩,最大压缩比为7:1 |
| 公共特性 |
可靠性 |
磁盘级数据保护 |
支持节点内数据保护,某个磁盘发生故障,可通过该节点其它磁盘实现数据的恢复 |
| 节点级数据保护 |
支持节点间RAID,某个节点发生故障,可通过其他节点实现数据的恢复 |
| 元数据可靠性 |
支持节点内RAID6,支持域内元数据节点A/P方式 |
| 可扩展性 |
硬盘 |
支持硬盘的在线增加和移除 |
| 存储节点 |
支持存储节点的在线增加和移除 |
| 域空间 |
支持域空间的在线增加和移除 |
| 可维护性 |
自动部署 |
支持软件平台自动化部署和配置 |
| 在线升级 |
支持在线升级,且用户读写业务不中断;升级过程不影响系统配置和日志、告警、用户保存的数据 |
| 状态监控 |
支持系统总体和各节点设备的运行状况监控 |
| 性能监控 |
可以进行性能监控,包括读写性能、IO性能、网络带宽等 |
| 资源监控 |
支持系统资源的动态跟踪(包括磁盘空间、CPU、内存、网络流量、文件系统) |
| 设备发现 |
支持指定IP、指定网段和子网内发现设备及自动发现新的设备 |
| 查询 |
支持标准数据节点上信息分布情况、系统的状态、性能、资源信息及文件和目录的查询 |
| 支持过滤查询 |
| 日志 |
支持多级别、多类型日志记录 |
| 支持日志导出、格式转换和自动保存功能 |
| 支持远程日志的收集、整理和分析,支持一键收集日志和故障信息 |
| 远程维护方式 |
支持SSH方式及Web方式的远程维护,支持远程日志收集 |
| 告警 |
支持界面告警和多种方式的远程告警,包括短信告警、邮件告警等 |
| 权限管理 |
支持三种级别管理用户(超级管理员用户、管理员用户和普通用户);支持用户分权分域管理 |
数据库特性
兼容SQL-92规范语法
支持常用的统计分析查询(Group、Sort)
支持多表的连接查询(Join)
支持JDBC、ODBC接口
特有的数据压缩技术,通过对应用透明的压缩方式,节省存储空间,提高资源利用率,压缩比最高可达7:1
文件系统特性
支持POSIX、NFS、CIFS、FTP等访问协议
高可靠,高可用性
Ersasure code(节点间RAID)技术,每域(<22节点)最大支持同时3个节点66块数据盘故障,对业务主机完全透明。
全冗余硬件设计,无单点故障,确保“五个9”(99.999%)的可用性,保障业务系统7×24 小时的持续可用
硬盘预拷贝技术,提前发现即将故障的硬盘,主动迁移故障盘数据,规避系统降级的风险,有效降数据丢失的风险
硬盘坏道修复技术,最大限度修复硬盘坏道,将硬盘故障率降低50%以上,延长硬盘的可使用周期
高性能,高扩展性
利用纯SSD Raid组加速元数据访问,将大幅提高系统性能。
分布式架构确保标准存储节点和元数据节点无瓶颈,文件多节点并发访问,并每节点提供32GB系统分布式缓存
随着CSS系统中节点的增加,性能呈线性增长,单域吞吐量达到数GB/s,系统最大吞吐量能够达到数百GB/s,存储容量增长超过100PB。
支持基于容量和性能的负载均衡,根据物理资源(CPU、缓存、网络 I/O 带宽和磁盘 I/O 带宽)进行均衡的数据迁移,保持系统性能和容量保持平衡,可适合于具有极高性能要求的计算群集。
支持在线部件热插拔,支持节点增加和减少,对业务主机完全透明,实现真正的在线扩容。
管理简单性和透明适应性
采用一体化方案,管理软件对硬件、网络、数据库服务统一管理
向导式的ISM GUI 管理软件,降低用户管理成本。
灵活的故障告警监控机制,提供邮件、SNMP 和Syslog 日志查询等告警和监控方式,提高维护效率。
自动化的性能统计及智能分析
基于Namespace的重复数据删除技术减少存储容量需求,节约成本并降低管理复杂度