产品介绍
技术参数
产品资料下载
D-Fusion SOC系列为谷数科技为中高端用户量身定制的一款大规模分布式集群存储,支持文件、数据块和对象统一存储,基于可扩展的集群架构,满足企业存储容量及存储性能的扩展需求。可实现超过256个存储节点组的扩展;随着存储节点组的增加,性能呈线性增长,存储容量可增长到160PB,提供超过2048GB/s带宽与2500万OPS。
D-Fusion SOC系列由多个存储节点组组成,每存储节点组采用冗余设计,由两台活动存储控制器(Active-Active)组成。节点之间通过IB/IP进行连接及信息交互。系统运行过程中,任意存储节点组失效均不会影响其他存储节点组的正常运行,无单点故障,提高了系统的服务级别。系统采用模块化设计,除具有卓越的高性能、可扩展性外,可用性和灵活性也具有一定优势。同时D-Fusion SOC系列通过整合硬件精简和简化管理等手段,较大限度的减少管理和员工成本,减少运营支出,为企业提供优质的整合服务。
D-Fusion SOC系列采用NAS方式对前端系统进行存储支持。通过NAS访问协议,即CIFS(SMB)、NFS能够提供文件系统访问:即NAS客户端可以使用单个NFS挂载点或CIFS共享来访问庞大的数据容器。每个客户端只需安装一个NFS文件系统挂载点或访问一个CIFS共享。在D-Fusion SOC系列产品提供的Prodigy OS内部,文件系统由管理员统一管理。对NAS客户端来说,每个文件系统都显示为一个文件夹或子目录,嵌套在NFS文件系统挂载点或CIFS共享的根目录下。文件系统可以随时添加,并且客户端立即就可以使用添加的文件系统,而无需再看到新存储后重新安装。此外,由于文件系统总容量不是固定的,多个用户可共享使用统一容量的存储池。
D-Fusion SOC系列包括以下产品:
1) D-Fusion 8000 SOC系列:超高端性能统一横向分布式集群存储系统,支持256个存储节点组集群,致力于高交易型及大吞吐密集型应用。D-Fusion 8000 SOC系列可提供现有scale-out 集群解决方案中高性能的带宽和OPS,支持负载均衡、统一命名空间等功能。D-Fusion 8000 SOC具备高性能的Infiniband主机端口,配备企业级的SSD和10k rpm的磁盘,融入高端全局缓存保护,在PRODIGY操作系统的支持下,整套存储系统的性能发挥得淋漓尽致。
2) D-Fusion 5000 SOC系列:面向企业关键业务的综合指数较高的横向分布式集群存储系统,支持128个存储节点组集群,在大容量、高性能、低成本之间实现平衡。D-Fusion 5000 SOC系列极大地加快了整个存储系统的读写速率,数据处理能力迅猛提升,为一款高吞吐及高并发应用程序的横向分布式集群存储系统。
3) D-Fusion 3000 SOC系列:高性价比、高扩展性中端横向分布式集群存储系统,支持64个存储节点组集群。无论是用作主存储还是辅助存储设备,D-Fusion 3000 SOC系列都可以提供出色的多功能性和连接性,从而以经济实惠的成本满足您的数据保护和数据管理需要,提高存储效率。
系统优势
横向扩展
横向扩展是应对存储环境中增长的需求的一种方式。所有存储控制器的可扩展性都会受到物理条件的限制:CPU和内存插槽的数量,以及磁盘架的空间。这些条件决定了控制器能提供的大容量和性能。如果需要更大的存储容量或性能容量,普遍性的方法是添加CPU和内存,或者安装更多磁盘架,但最终控制器会被完全填满,而无法添加硬件。此时,先想到的选择就是添加另一个控制器。要实现此操作,其中一个办法是“纵向扩展”:也就是每个附加控制器都是一个完全独立的管理实体,不会提供任何共享存储资源。如果要用更大的新控制器完全取代原来的控制器,需要采用数据迁移将数据从旧控制器迁移到新控制器。这项工作非常耗时且具有潜在的破坏性,而且还可能对要连接的所有主机系统的配置进行更改。
如果新控制器要与原来的控制器共存,则现在会有两个单独管理的存储控制器,并且没有内置的工具来平衡或重新分配两者间的工作负载。随着控制器数量的增加,这种情况会变得更加糟糕。通过使用向上扩展,操作负担会随着环境的增长而相应增加,最终会出现一个非常不平衡且难以管理的环境。技术更新周期需要提前进行周密计划,长时间的中断和配置更改会给系统带来风险。
与此相反,使用横向扩展则意味着当存储环境增长时,其它控制器会无缝添加到共享存储基础架构上的资源池中。主机和客户端连接以及数据存储库可在资源池中无缝、无中断地随意移动,这样便可轻松平衡可用资源的现有工作负载,同时也可以轻松部署新的工作负载。可在使环境仍处于在线状态和提供数据的情况下,完成技术更新(更换硬盘架、添加或完全取代存储控制器)。
高性能
D-Fusion SOC系列率先实现高达256个存储节点组的可扩展性,在单个统一存储平台上整合更多的文件服务器和应用程序存储,其性能随着存储节点组的扩展可近线性扩展,存储容量可高达160PB。
D-Fusion SOC系列满足高性能计算集群的极高性能要求,随着存储节点组的增加,聚合带宽可高达2048GB/s,OPS可高达2500万,适用于成千上万个节点和极高性能要求的计算集群。同时D-Fusion SOC系列支持智能负载平衡和动态精简配置,助力企业随业务需求变化灵活扩展存储。
高扩展性
D-Fusion SOC系列继承了D-Fusion标准版产品的纵向扩展技术,实现了Scale-up与Scale out技术相融合,经济高效地突破纵向扩展,实现全方位的扩展。D-Fusion SOC系列在灵活扩展时,可不干扰业务流程,对客户端透明,从而保证业务端的持续发展。
高存储效率
D-Fusion SOC系列提供了业界出色的高级存储效率、数据管理和数据保护功能。
智能的分布式存储集群管理,D-Fusion SOC系列借助PRODIGY操作系统的动力,实现高效地横向扩容。
高效的IB交换技术,D-Fusion SOC系列产品内部通过IB进行数据交换,实现存储节点组间的数据快速传输,结合独特的hash算法将数据返回给客户端,从而使得数据访问快速、透明。
通过Prodigy Viewer管理工具进行管理,管理智能、简单、便捷。
安全权限管理、病毒扫描、静态数据加密等功能将数据安全融入D-Fusion SOC系列中,真正实现了统一精简的数据管理与保护。
D-Fusion SOC系列可采用重复数据删除技术,实现很高的数据压缩率,进而提高存储系统资源的利用率,降低成本。
高可靠性
D-Fusion SOC 存储系统的可靠性超过99.999%,即全年停机时间(包括计划停机在内)不超过3分钟,它从硬件、系统、架构等多个层面提供高可靠性保证措施。
硬件层
D-Fusion SOC 存储系统的所有的硬件组件,包括控制器、电源、风扇、网络连接都是冗余设计。
D-Fusion SOC 存储系统采用实时数据校验(checksum),自动检查并修复磁盘可能损坏的扇区,保证数据完整性。
系统层
D-Fusion SOC 存储系统可提供RAID 0、1、5、6、10、50、60、三重奇偶校验等多种冗余方式,支持热备盘以及自动RAID重建。D-Fusion SOC 存储系统的创建时间较快,通常不超过2秒钟。D-Fusion SOC 存储系统独有的动态条带化RAID技术还能有效防止RAID“写漏洞”现象发生;
D-Fusion SOC 存储系统的PRODIGY-FS文件系统非常强壮,在极端情况下也能保持一致性,并且在系统重启时能自动迅速恢复。D-Fusion SOC 存储系统没有单独的元数据服务器,所有元数据由控制器进行管理,并分布式保存在磁盘上,获得与数据同样的可靠性保护。这种方式远比单独的元数据服务器可靠,因为后者在元数据服务器崩溃时会中断业务,恢复时需要很长时间完成类似fsck的文件系统一致性检查任务,更严重时会因元数据不能得到全面恢复而导致部分甚至全部数据损坏或丢失。
架构层
多台D-Fusion SOC 存储控制器相互连接组成高可用集群,该集群工作模式是多活动式(Active-Active),即所有控制器可以同时提供数据访问,与传统的主备工作模式(Active-Standby)相比,显著提高了数据存储的性能。同时这两台或多台控制器互为热备,任何一台出现故障,另一台都能将自动地、无间断地将故障控制器的任务和所管理的数据完全接管过来,而这一过程对客户端是完全透明的。这样就保证了7x24的业务连续性。而其它厂商的“NAS网关+SAN阵列”结构,多数只能做到SAN阵列双控互为备份,而无法实现NAS网关互为备份。
D-Fusion SOC系列由多个存储节点组组成,每存储节点组采用冗余设计,由两台活动存储控制器(Active-Active)组成。节点之间通过IB/IP进行连接及信息交互。系统运行过程中,任意存储节点组失效均不会影响其他存储节点组的正常运行,无单点故障,提高了系统的服务级别。系统采用模块化设计,除具有卓越的高性能、可扩展性外,可用性和灵活性也具有一定优势。同时D-Fusion SOC系列通过整合硬件精简和简化管理等手段,较大限度的减少管理和员工成本,减少运营支出,为企业提供优质的整合服务。
D-Fusion SOC系列采用NAS方式对前端系统进行存储支持。通过NAS访问协议,即CIFS(SMB)、NFS能够提供文件系统访问:即NAS客户端可以使用单个NFS挂载点或CIFS共享来访问庞大的数据容器。每个客户端只需安装一个NFS文件系统挂载点或访问一个CIFS共享。在D-Fusion SOC系列产品提供的Prodigy OS内部,文件系统由管理员统一管理。对NAS客户端来说,每个文件系统都显示为一个文件夹或子目录,嵌套在NFS文件系统挂载点或CIFS共享的根目录下。文件系统可以随时添加,并且客户端立即就可以使用添加的文件系统,而无需再看到新存储后重新安装。此外,由于文件系统总容量不是固定的,多个用户可共享使用统一容量的存储池。
D-Fusion SOC系列包括以下产品:
1) D-Fusion 8000 SOC系列:超高端性能统一横向分布式集群存储系统,支持256个存储节点组集群,致力于高交易型及大吞吐密集型应用。D-Fusion 8000 SOC系列可提供现有scale-out 集群解决方案中高性能的带宽和OPS,支持负载均衡、统一命名空间等功能。D-Fusion 8000 SOC具备高性能的Infiniband主机端口,配备企业级的SSD和10k rpm的磁盘,融入高端全局缓存保护,在PRODIGY操作系统的支持下,整套存储系统的性能发挥得淋漓尽致。
2) D-Fusion 5000 SOC系列:面向企业关键业务的综合指数较高的横向分布式集群存储系统,支持128个存储节点组集群,在大容量、高性能、低成本之间实现平衡。D-Fusion 5000 SOC系列极大地加快了整个存储系统的读写速率,数据处理能力迅猛提升,为一款高吞吐及高并发应用程序的横向分布式集群存储系统。
3) D-Fusion 3000 SOC系列:高性价比、高扩展性中端横向分布式集群存储系统,支持64个存储节点组集群。无论是用作主存储还是辅助存储设备,D-Fusion 3000 SOC系列都可以提供出色的多功能性和连接性,从而以经济实惠的成本满足您的数据保护和数据管理需要,提高存储效率。
系统优势
横向扩展
横向扩展是应对存储环境中增长的需求的一种方式。所有存储控制器的可扩展性都会受到物理条件的限制:CPU和内存插槽的数量,以及磁盘架的空间。这些条件决定了控制器能提供的大容量和性能。如果需要更大的存储容量或性能容量,普遍性的方法是添加CPU和内存,或者安装更多磁盘架,但最终控制器会被完全填满,而无法添加硬件。此时,先想到的选择就是添加另一个控制器。要实现此操作,其中一个办法是“纵向扩展”:也就是每个附加控制器都是一个完全独立的管理实体,不会提供任何共享存储资源。如果要用更大的新控制器完全取代原来的控制器,需要采用数据迁移将数据从旧控制器迁移到新控制器。这项工作非常耗时且具有潜在的破坏性,而且还可能对要连接的所有主机系统的配置进行更改。
如果新控制器要与原来的控制器共存,则现在会有两个单独管理的存储控制器,并且没有内置的工具来平衡或重新分配两者间的工作负载。随着控制器数量的增加,这种情况会变得更加糟糕。通过使用向上扩展,操作负担会随着环境的增长而相应增加,最终会出现一个非常不平衡且难以管理的环境。技术更新周期需要提前进行周密计划,长时间的中断和配置更改会给系统带来风险。
与此相反,使用横向扩展则意味着当存储环境增长时,其它控制器会无缝添加到共享存储基础架构上的资源池中。主机和客户端连接以及数据存储库可在资源池中无缝、无中断地随意移动,这样便可轻松平衡可用资源的现有工作负载,同时也可以轻松部署新的工作负载。可在使环境仍处于在线状态和提供数据的情况下,完成技术更新(更换硬盘架、添加或完全取代存储控制器)。
高性能
D-Fusion SOC系列率先实现高达256个存储节点组的可扩展性,在单个统一存储平台上整合更多的文件服务器和应用程序存储,其性能随着存储节点组的扩展可近线性扩展,存储容量可高达160PB。
D-Fusion SOC系列满足高性能计算集群的极高性能要求,随着存储节点组的增加,聚合带宽可高达2048GB/s,OPS可高达2500万,适用于成千上万个节点和极高性能要求的计算集群。同时D-Fusion SOC系列支持智能负载平衡和动态精简配置,助力企业随业务需求变化灵活扩展存储。
高扩展性
D-Fusion SOC系列继承了D-Fusion标准版产品的纵向扩展技术,实现了Scale-up与Scale out技术相融合,经济高效地突破纵向扩展,实现全方位的扩展。D-Fusion SOC系列在灵活扩展时,可不干扰业务流程,对客户端透明,从而保证业务端的持续发展。
高存储效率
D-Fusion SOC系列提供了业界出色的高级存储效率、数据管理和数据保护功能。
智能的分布式存储集群管理,D-Fusion SOC系列借助PRODIGY操作系统的动力,实现高效地横向扩容。
高效的IB交换技术,D-Fusion SOC系列产品内部通过IB进行数据交换,实现存储节点组间的数据快速传输,结合独特的hash算法将数据返回给客户端,从而使得数据访问快速、透明。
通过Prodigy Viewer管理工具进行管理,管理智能、简单、便捷。
安全权限管理、病毒扫描、静态数据加密等功能将数据安全融入D-Fusion SOC系列中,真正实现了统一精简的数据管理与保护。
D-Fusion SOC系列可采用重复数据删除技术,实现很高的数据压缩率,进而提高存储系统资源的利用率,降低成本。
高可靠性
D-Fusion SOC 存储系统的可靠性超过99.999%,即全年停机时间(包括计划停机在内)不超过3分钟,它从硬件、系统、架构等多个层面提供高可靠性保证措施。
硬件层
D-Fusion SOC 存储系统的所有的硬件组件,包括控制器、电源、风扇、网络连接都是冗余设计。
D-Fusion SOC 存储系统采用实时数据校验(checksum),自动检查并修复磁盘可能损坏的扇区,保证数据完整性。
系统层
D-Fusion SOC 存储系统可提供RAID 0、1、5、6、10、50、60、三重奇偶校验等多种冗余方式,支持热备盘以及自动RAID重建。D-Fusion SOC 存储系统的创建时间较快,通常不超过2秒钟。D-Fusion SOC 存储系统独有的动态条带化RAID技术还能有效防止RAID“写漏洞”现象发生;
D-Fusion SOC 存储系统的PRODIGY-FS文件系统非常强壮,在极端情况下也能保持一致性,并且在系统重启时能自动迅速恢复。D-Fusion SOC 存储系统没有单独的元数据服务器,所有元数据由控制器进行管理,并分布式保存在磁盘上,获得与数据同样的可靠性保护。这种方式远比单独的元数据服务器可靠,因为后者在元数据服务器崩溃时会中断业务,恢复时需要很长时间完成类似fsck的文件系统一致性检查任务,更严重时会因元数据不能得到全面恢复而导致部分甚至全部数据损坏或丢失。
架构层
多台D-Fusion SOC 存储控制器相互连接组成高可用集群,该集群工作模式是多活动式(Active-Active),即所有控制器可以同时提供数据访问,与传统的主备工作模式(Active-Standby)相比,显著提高了数据存储的性能。同时这两台或多台控制器互为热备,任何一台出现故障,另一台都能将自动地、无间断地将故障控制器的任务和所管理的数据完全接管过来,而这一过程对客户端是完全透明的。这样就保证了7x24的业务连续性。而其它厂商的“NAS网关+SAN阵列”结构,多数只能做到SAN阵列双控互为备份,而无法实现NAS网关互为备份。
产品概述 | ||||
D-Fusion 8000 SOC系列 | 超高端性能统一横向扩展NAS分布式集群存储系统,支持128个存储节点集群,致力于高交易型及大吞吐密集型应用。D-Fusion 8000 SOC系列可提供现有scale-out 集群解决方案中支持的带宽2048GB/s和支持的OPS 25,000,000,借助独特的hash算法实现存储端的负载均衡,充分利用存储资源,改善存储节点组利用率。D-Fusion 8000 SOC具备高性能的Infiniband主机端口,融入高端全局缓存保护,在PRODIGY操作系统的支持下,整套存储系统的性能发挥得淋漓尽致。每节点可配置双路共24核及以上处理器,实现高性能处理。 | |||
D-Fusion 5000 SOC系列 | 面向企业关键业务的综合指数较高的横向扩展NAS分布式集群存储系统,可支持128个存储节点集群,在大容量、高性能、低成本之间实现平衡。D-Fusion 5000 SOC系列,极大地加快了整个存储系统的读写速率,数据处理能力迅猛提升,存储集群带宽可高达1024GB/s,OPS高可达12,000,000,为一款高吞吐及高并发应用程序的横向集群存储系统。每节点可配置双路共20核及以上处理器,实现高性能处理。 | |||
D-Fusion 3000 SOC系列 | 高性价比、高扩展性中端横向扩展NAS分布式集群存储系统,支持8个存储节点集群。无论是用作主存储还是辅助存储设备,D-Fusion 3000 SOC系列都可以提供出色的多功能性和连接性,存储集群带宽可高达256GB/s,OPS高可达6,400,000,从而以经济实惠的成本满足您的数据保护和数据管理需要,提高存储效率。每节点可配置双路共16核及以上处理器,实现高性能处理。 | |||
硬件参数 | D-Fusion 3000 SOC | D-Fusion 5000 SOC | D-Fusion 8000 SOC | |
系统结构 | Scale-out Cluster | Scale-out Cluster | Scale-out Cluster | |
节点数量 | 64 | 128 | 256 | |
高速缓存 | 8TB | 24TB | 64TB | |
带宽 | 256GB/s | 1024GB/s | 2048GB/s | |
OPS | 6,400,000 | 12,000,000 | 25,000,000 | |
支持磁盘驱动器数量 | 3264 | 5760 | 13056 | |
主机接口 | 1/10/25/40/100Gb IP, 40/56/100/200Gb IB,8/16/32Gb FC等 | |||
磁盘驱动器 | NVMe-SSD,SSD,SAS,NL-SAS,SATA等,支持热插拔 | |||
支持裸容量 | 40PB | 80PB | 160PB | |
功能特点 | ||||
操作系统 | Prodigy智能分布式集群存储操作系统 | |||
文件系统 |
ProdigyFS 全日志集群文件系统, 全局命名空间 支持在线扩容; 用户、工作组、目录级别配额管理 |
|||
HA故障转移 | 多活动控制器自动故障转移(Failover), 对客户端透明 | |||
网络访问协议 | CIFS, NFS v2/v3/v4 (采用UDP 或 TCP), iSCSI, FC, SCSI over RDMA, IPoIB, FTP, HTTP, WebDAV, FCoE, RESTful等 | |||
客户端支持 | Windows NT 4.0/2000/2003/XP, Red Hat Linux, SUSE Linux, Sun Solaris, HP-UX, Mac OS, IBM AIX | |||
RAID级别 | 支持RAID 0, 1, 5, 6, 10, 50, 60,三重奇偶校验; 热备盘自动RAID重建; RAID即时创建, 动态条带化 | |||
快照与克隆 | 即时创建与恢复, 不影响性能 | |||
纠删码数据保护 |
数据进入系统之后,首先被切分为N个数据条带,然后计算出M个冗余条带,并最终保存在N+M个不同的节点中。 由于同一条带的数据保存在不同节点中,所以存储中的数据能够支持节点级的故障,保证数据不丢失。 |
|||
多副本 | 在写入数据时,系统自动分配当前性能和空间最优的一/二个存储池,且分配的存储池与初始写入节点为不同的机框,将数据写入到新分配的存储池中,形成多个数据副本。 | |||
负载均衡 |
存储端负载均衡:通过DNS方式等方式对主机端来实现统一挂载点,统一命名空间,对外提供NFS、CIFS等标准访问协议,负载均衡在存储内部实现。 主机端负载均衡:在主机端实现分布式存储的负载均衡功能,对主机端实现统一挂载点,统一命名空间,对外提供NFS、CIFS等标准访问协议。 |
|||
快速重构 | D-Fusion SOC存储系统采用一定的容错策略,通过重构技术确保存储的可靠性和数据可用性。RAID技术能够在系统层面上提高存储阵列的可靠性。假设RAID的冗余度为M,当RAID组里N块盘同时损坏,若N <= M系统仍然能够正常工作(只是此时存储池降级冗余度降低),同时热备盘自动替换故障盘进行重构,重构完成后系统可以恢复之前配置的冗余度。在当前系统所供的存储设备配置环境下,数据重构速率达1TB/6分钟,具备快速数据恢复能力。 | |||
故障快速切换 | 双活存储系统中的两台存储阵列相互冗余,当其中一台存储阵列发生故障时,可由另一台存储阵列直接接管。对于服务器而言,由于看到的是一个虚拟卷,因此存储阵列的故障切换仅相当于一次存储访问路径切换,切换速度为秒级,业务无须中断,且不需任何人工干预。 | |||
系统管理和监控 |
Prodigy Viewer Web图形界面(GUI), 命令行界面(CLI), 标准中文和英文; SNMP, 远程日志, Telnet, Rlogin, Rsh, SSH, E-mail报警 |
|||
标准许可软件 |
Prodigy智能分布式集群存储操作系统 |
MagiCluster 故障切换 MagicTier自动分层存储 MagiClone数据卷即时复制软件 MagicSAA安全权限访问与审计 VMstore存储虚拟分区软件 Prodigy Viewer 远程管理软件 DynaCache动态缓存优化软件 MagicRAID 0,1,5,6,10,50,60,三重奇偶校验 Checksum 实时磁盘校验与数据修复 可扩展其他软件 MagicLB负载均衡管理软件 |
||
物理规格 | ||||
存储控制器单元 | D-Fusion 3000 SOC单节点,4U | D-Fusion 5000 SOC单节点,4U | D-Fusion 8000 SOC单节点,6U | |
存储扩展单元 | B700,4U;B702, 2U | |||
交流电源/电流 | 双冗余, 100-240VAC, 50-60Hz | |||
运行环境 | 5°C-35°C, 10%-90%相对湿度, 非冷凝结 |