康银集群存储系统DS系列是一款自主研发的针对海量数据及高并发IO应用而设计,集硬件平台、先进的分布式文件系统和智能管理功能于一体的产品。康银集群存储系统颠覆传统的基于机头转发读写数据的模式,将单一任务将根据一定的算法分割为多个小任务由多个存储节点同时完成,使得整个系统的IO性能成倍提高,消除了单一性能瓶颈问题和单点故障;并提供PB级的容量和上百GB的吞吐量,能很好的适用于数字媒体、高性能计算、大规模数据中心等领域。

集群架构图
产品优势特点:
Scale-out架构,在线平滑扩容
康银集群存储采用scale-out扩展方式,性能和容量随存储节点数量的增加而线性增长,可以很好的满足用户未来随业务增长所带来的海量数据的存储空间和带宽的需求;避免由于用户需求的不断增长而带来的数据迁移和应用中断的问题。单套存储容量可达38.4PB,吞吐量可达100GB/s。并且所有扩容操作均可以在线进行,无须中断应用的正常运行。在扩容过程中,系统性能不会下降;单一块硬盘或节点故障时,集群存储依然正常提供数据访问。
统一命名空间
康银集群存储采用全局统一命名空间,实现数据全局共享,统一管理所有存储节点空间。可将多台异构存储设备剩余空间进行统一管理和动态的资源调配,为用户提供自动化智能化的存储系统。
丰富的接口支持
康银集群存储支持块级、文件级和对象存储,同时支持CIFS、FTP、NFS、HDFS、S3、NDMP、OpenSwift、WebDAV、POSIX等协议。为了适应云计算时代对存储系统所提出的新要求,康银集群存储系统也可以提供REST接口、KVM网关、Xen网关。避免分别存储文件级数据和块级数据所引入的存储容量利用率问题。同时缩减设备投资,并大幅降低管理成本。
副本技术,保证数据安全可靠
康银集群存储摒弃了传统的RAID模式,采用更高安全级别的副本备份机制,通过将文件副本复制并且存储在不同的节点,来保证数据安全。一旦有数据因为操作不当而丢失,可以由多节点同时进行恢复,每TB恢复速度是RAID的十几倍,前端应用完全不会受到影响,即使面临50%的节点宕机,也能通过副本重建数据。并且集群规模越大,重建时间越短。
自动分层技术
康银集群存储系统通过设定优化的数据迁移规则,根据数据的重要性、访问频率、保留时间、容量、性能等指标,自动迁移副本至高性能节点,从而使重要数据和常用数据在最短的时间内被访问到,使极少使用的数据存放于普通的存节点中供以后使用,提高系统资源利用率,降低用户成本。
热点数据处理技术
康银存储系统特色的热点数据处理技术,在系统发现某个数据访问并发数量等指标超过阀值后,系统即自动的重新分布当前数据的副本至更多的存储节点上,以分担热点数据的访问压力。大大提升了并发访问中热点数据的访问速度,降低了磁盘损耗和损坏率。
智能管理,降低管理维护成本
康银集群存储系统采用向导式的管理软件,降低用户管理成本。新增节点自动部署,并自动实现负载分担,无需人工干预。灵活的故障告警监控机制,提供邮件、SNMP和日志查询等告警和监控方式,提高维护效率;简化安装和维护过程。管理难度不会因为存储节点增加而增加。
应用场景:

1、非线编系统
在视频加工过程中,会有大量的工作站对非线编辑系统的存储进行数据读取调用,由于多个工作站在共同编辑,同时工作站的数量也在不断增加,对后端存储的性能和扩展性都有需求。康银集群存储能按需扩展,聚合带宽和性能线性增长能很好的满足并发访问需要的性能。

2、媒资系统
媒体资源是电视台的核心资产,需要长期保存,同时新的媒资又不停的生产出来,因此电台对媒资系统的扩展性有很高的要求。并且由于节目制作的需要,媒体资源会频繁的被调用和读取,加上高低请码流的转换速度需求,因此对媒资系统存储带宽也有一定的要求。康银集群存储能够在线平滑扩容,同时性能随着容量的增加而线性增加,很好的应对媒资系统存储的难题。

3、播出系统二级缓存
播出系统二级缓存主要为播出服务器提供节目,同时也提供备播的功能,如果播出服务器故障则会从播出系统二级缓存中直接播放,因此播出系统对数据安全要求苛刻康银集群存储采用副本技术,相比传统RAID技术,在冗余度和数据恢复时间上有极大地优势,保证播出系统二级缓存中的数据安全。

4、视频点播
视频点播系统具有实时性和并发性,大量的用户可能同时并发播放一个视音频。同时,由于节目越来越多,格式越来越大,因此需要一个海量的存储系统。康银集群存储系统采用scale-out架构,能横向的扩展存储容量和性能,同时热点数据管理、自动分层等技术有效提高数据并发读写效率,能很好的适用于视频点播场景。

产品技术参数:
产品型号 |
DS3500 |
处理器类型 |
八核Intel处理器 |
单节点高速缓存 |
48GB缓存 最大支持512GB |
支持磁盘类型 |
企业级SSD/SAS/SATA硬盘, |
单节点网络接口 |
2*1GbE,2*10GbE |
网络接口扩展 |
支持千兆和万兆以太网,支持Infiniband(包括 IP over IB 和 RDMA 方式); |
扩展能力 |
支持256个节点的扩展能力 |
最大存储容量 |
100PB |
访问协议 |
支持 SMB(CIFS)、FTP、NFS、HDFS、S3、NDMP、OpenSwift、WebDAV、POSIX 协议访问,无须在服务器上安装客户端即可访问并行存储数据。可同时支持 NAS 访问和块协议访问; |
副本数量 |
2-12个 |
纠删码功能 |
N+M |
系统功能 |
|
数据安全 |
采用数据副本技术、数据纠删技术以及硬件RAID数据保护技术,支持在线修改数据冗余度;支持目录和文件级别的数据副本,提高数据的安全性 |
数据服务能力 |
支持网络文件系统、块数据和对象数据的统一存储 |
自动数据重建 |
支持坏盘、添加/删除节点、添加/删除硬盘后的数据自动重建 |
数据安全策略 |
支持同一存储池内或异构目录副本与纠删数据保护功能混合使用 |
数据保护级别 |
支持硬件级、节点级和机柜级三级数据保护方式 |
数据快照功能 |
支持256个数据快照 |
硬盘漂移技术 |
支持在线节点硬盘直接在其它在线节点上直接使用,无需数据恢复过程 |
精简配置功能 |
支持,提供用户存储空间配额控制 |
QoS功能 |
支持基于块设备的卷流量管理控制 |
多租户功能 |
支持Multi-tenancy多租户配置,可提供API与OpenStack对接 |
数据访问优化 |
支持热点数据处理技术,根据文件访问热度,自动增加和删除文件副本数量 |
自动分层技术 |
支持 |
OpenStack支持 |
支持Cinder、Glance存储接口集成 |
云平台支持 |
支持主流KVM、XEN、VMware、HyperV虚拟化系统集成 |
智能管理技术 |
智能负载均和智能数据迁移,无需人工干预 |
智能监控 |
支持集群总体状态、存储节点状态、硬盘状态、网络状态等多种详细运行状态监控 |
软件升级 |
提供管理平台的热升级功能、集群后台服务的冷升级功能 |
硬件平台 |
支持无品牌限定的准备X86硬件体系 |
软件部署 |
支持通过任意一个节点的全Web部署配置,支持各种浏览器,包括IE8及其以上版本、Chrome、Firefox、Safari等,支持智能手机和平板查看及配置; |
管理界面 |
CLI、基于Web的图形管理界面 |
报警功能 |
Email、日志 |
产品型号 |
DS3600 |
处理器类型 |
八核Intel处理器 |
单节点高速缓存 |
48GB缓存 最大支持512GB |
支持磁盘类型 |
企业级SSD/SAS/SATA硬盘, |
单节点网络接口 |
2*1GbE,2*10GbE |
网络接口扩展 |
支持千兆和万兆以太网,支持Infiniband(包括 IP over IB 和 RDMA 方式); |
扩展能力 |
支持256个节点的扩展能力 |
最大存储容量<, /, P> |
100PB |
访问协议 |
支持 SMB(CIFS)、FTP、NFS、HDFS、S3、NDMP、OpenSwift、WebDAV、POSIX 协议访问,无须在服务器上安装客户端即可访问并行存储数据。可同时支持 NAS 访问和块协议访问; |
副本数量 |
2-12个 |
纠删码功能 |
N+M |
系统功能 |
|
元数据节点 |
多个元数据节点实现冗余备份模式 |
元数据安全 |
支持主/主、主/热备、主/冷备模式 |
数据安全 |
采用数据副本技术、数据纠删技术以及硬件RAID数据保护技术,支持在线修改数据冗余度;支持目录和文件级别的数据副本,提高数据的安全性 |
数据服务能力 |
支持网络文件系统、块数据和对象数据的统一存储 |
自动数据重建 |
支持坏盘、添加/删除节点、添加/删除硬盘后的数据自动重建 |
数据安全策略 |
支持同一存储池内或异构目录副本与纠删数据保护功能混合使用 |
数据保护级别 |
支持硬件级、节点级和机柜级三级数据保护方式 |
数据快照功能 |
支持256个数据快照 |
硬盘漂移技术 |
支持在线节点硬盘直接在其它在线节点上直接使用,无需数据恢复过程 |
精简配置功能 |
支持,提供用户存储空间配额控制 |
QoS功能 |
支持基于块设备的卷流量管理控制 |
多租户功能 |
支持Multi-tenancy多租户配置,可提供API与OpenStack对接 |
数据访问优化 |
支持热点数据处理技术,根据文件访问热度,自动增加和删除文件副本数量 |
自动分层技术 |
支持 |
OpenStack支持 |
支持Cinder、Glance存储接口集成 |
云平台支持 |
支持主流KVM、XEN、VMware、HyperV虚拟化系统集成 |
智能管理技术 |
智能负载均和智能数据迁移,无需人工干预 |
智能监控 |
支持集群总体状态、存储节点状态、硬盘状态、网络状态等多种详细运行状态监控 |
软件升级 |
提供管理平台的热升级功能、集群后台服务的冷升级功能 |
硬件平台 |
支持无品牌限定的准备X86硬件体系 |
软件部署 |
支持通过任意一个节点的全Web部署配置,支持各种浏览器,包括IE8及其以上版本、Chrome、Firefox、Safari等,支持智能手机和平板查看及配置; |
管理界面 |
CLI、基于Web的图形管理界面 |
报警功能 |
Email、日志 |