01非结构化数据管理难题
IDC预测,2018年到2025年之间,全球产生的数据量将会从33ZB增长到175ZB,其中超过80%的数据都会是处理难度较大的非结构化数据。
Gartner也预测,到2024年,大型企业以文件或对象存储在企业内部、边缘或公有云中的非结构化数据量将是2020年的三倍。
非结构化数据其体量要比结构化数据大得多,而且,随着现在非结构化数据在企业生产系统中的重要性不断凸显,多数企业都面临海量非结构化数据的管理难题:
1、海量小文件快速迁移
更换设备厂商,新老系统替换都需要迁移数据。但当数据规模较大,特别是涉及海量的小文件的时候,传统的迁移方式迁移的速度极慢,无法满足业务连续性需求。
2、从NAS向对象转型
很多企业都在去NAS化,利用对象存储的自定义标签属性进行数据赋能,支持业务创新。但是,原有的NAS数据如何迁移到对象存储上?传统的迁移方式不支持S3协议,无法把文件格式数据转换为对象格式数据。
3、对象存储的数据备份
目前国外主流的备份软件,可以支持NAS的备份,但鲜有支持对象存储备份,也就是它们一般都支持把对象存储作为备份目标,但不能备份对象存储里面的数据。很多中国的用户都已经把对象存储用在生产系统里,里面的数据也需要完善的保护。
4、文件系统的勒索病毒防护,误删除保护
现在文件系统,受到勒索病毒和人为误操作的风险很高,需要有完善的数据备份和恢复机制。
5、数据生命周期管理
现在非结构化数据需要保存的时间越来越长,一直保持在主存储上,成本居高不下,而且数据量太大以致没有足够的备份窗口完成备份。如果把主存储的老文件及时迁移到对象存储、蓝光存储甚至公有云,可以完美解决主存储的成本和备份窗口问题。
6、文件分发,多地共享
很多企业都有很多分支机构,总部的文件需要及时分发到分支机构的NAS里,方便分支机构就近快速访问。
7、共享灾备中心
大型组织都有很多分支机构,如果每个分支都建立自己的灾备系统,成本太高。总部建立一个共享灾备中心,可以集中解决分支机构的数据备份问题。
8、数据采集汇总
很多边缘计算场景,需要边缘节点及时回传采集的数据,汇聚到总部。由于边缘节点众多,调度和运维比较复杂,需要采用Kubernetes进行编排。
……
02全新发布X3DS
为了应对上述问题,日前,XSKY发布了全新的图形化数据管理软件X3DS。
X3DS(XSKY 3D data management System)是XSKY提供的立体数据管理系统。其基于微服务架构,具有极大的弹性和扩展性。X3DS可提供非结构化数据的DR(Disaster Recovery,灾难恢复),DP(Data Protection,数据保护)和DM(Data Migration,数据迁移)这三大管理能力,是一个立体的三维(3D)数据管理平台。
X3DS基于微服务架构,自带Kubernetes平台,也支持外部的Kubernetes,部署简单灵活。X3DS支持单节点部署,也支持多节点集群实现高可用,支持以虚拟机或容器形态独立部署,也可以内嵌在XSKY的SDS存储节点里,大大节省用户的投资。
X3DS支持非结构化数据的复制、迁移、备份、归档功能,支持丰富的数据管理策略,满足不同用户的个性化要求。
X3DS架构图
X3DS支持跨厂商的文件和对象存储之间数据相互移动,支持跨云的数据上云和下云,适应性广,避免用户被设备厂商和公有云厂商锁定。
03产品特点
X3DS界面
1、微服务架构,弹性扩展
基于微服务架构,支持外部Kubernetes平台,具有极大的弹性和灵活性;
单节点或多节点集群部署,可靠性高,性能好。
2、完善的非结构化数据管理功能
支持复制,RPO为分钟级别,具有容灾切换功能。支持数据校验,保证复制数据的一致性;
支持迁移,支持多目录并发,性能高;
支持备份,支持上千个恢复点,RPO为小时级别。支持重删和加密;
支持归档,归档策略丰富,删除数据前会再次确认数据已经归档,更加安全;
一键跳转到XSKY S3 Console,可以对对象存储进行创建桶,上传下载文件,搜索对象属性等管理工作。
3、跨厂商跨云数据流动
支持NFS/SMB/FTP/S3/fastDFS数据相互流动;
支持多对一的数据移动,支持丰富的数据整合策略;
支持阿里云、百度云等公有云的上云和下云,具备丰富的控制策略;
支持在不同厂商的对象或文件存储间数据移动,避免锁定。
04应用场景
X3DS可以作为企业非结构化数据管理平台,具有丰富的使用场景:
1、灾难恢复
利用异步复制技术,满足企业分钟级别RPO要求。
2、数据备份
支持永远增量备份,支持重删和加密,支持上千个恢复点,有效防止勒索病毒和误操作。
3、数据生命周期管理
支持归档到文件存储、对象存储、蓝光存储、公有云等,策略丰富。
4、数据迁移
源端和目标端协议无需一致,高并发,迁移速度可控,对业务影响小。
5、NAS转对象
支持NAS数据迁移到对象存储,助力企业业务创新。
6、混合云/多云
支持数据在云上云下自由流动,避免被云锁定。
7、共享灾备
支持多对一复制,一套系统可保护企业所有分支机构非结构化数据的安全。
8、文件分发
支持一对多复制,总部数据及时分发到分支机构,分支机构就地访问,体验好。
9、边缘计算
支持数据中心集中部署一套X3DS,从多个分支机构或边缘节点采用标准协议采集各种数据,完成数据自动汇总。也可以和边缘计算的Kubernetes联动,采集边缘节点的本地盘的数据。
XSKY X3DS的推出,帮助用户以极简的方式,灵活高效地对非结构化数据进行立体的管理,让数据资源真正变成数据资产,挖掘数据价值。