/ 中存储网

XSKY联合发布海量影像数据统筹管理方案

2019-08-09 21:02:40 来源:中存储

01影像统筹现状

影像数据作为空间数据的重要组成部分,相较于矢量数据信息拥有更好的表现力,能够更为直接地展现地理外貌等特征。

过去,一副卫星遥感影像数据大约为几百MB,而现在单幅影像数据就有2-3GB,数据大小增长了近10倍。影像数据总量也随之达到PB级甚至突破ZB级规模。

不仅如此,随着现在涌现的无人机、传感器等更多新型的影像采集工具,影像文件数量也同样有了几何级数增长,并且大部分都是几MB的小文件。

随着单幅影像和数据总量的急剧增加,同时伴随亿级乃至十数亿级的影像文件出现,如何安全高效的存储、有组织有条理的在线管理数据,实现敏捷动态的应用,成为传统生产单位当前主要面临的挑战。

另外,传统的影像生产方式还存在着以下风险:

▪ 过去各部门之间的数据共享主要依靠人为携带硬盘拷贝数据,不仅工作效率低,还存在着数据泄露的安全问题;

▪ 传统架构扩容不便,无法经济高效的承载海量数据,同时传统存储的“卡脖子效应”,在面临海量并发I/O等情况时容易出现性能瓶颈;

▪ 数据分散、缺乏统一的管理,数据共享难。数据冗余度高,造成不必要的浪费;

▪ 多套系统并存,后期维护成本高;

▪ 生产、管理、服务分离,降低业务创新能力。

02影像统筹解决方案

存储等基础设施如何助力用户构建更安全、更高效且面向未来就绪的影像统筹平台?

8月8日,由中国地理信息产业协会空间大数据技术与应用工作委员会主办,XSKY公司等参与协办的“2019大数据与地理智能高峰论坛”举行。

会上,XSKY联合业界领先的ESRI和捷泰天域公司推出了AI影像,海量影像数据统筹管理,大数据,无人机影像等系列影像统筹解决方案。

在海量影像数据统筹管理方案中,XSKY XEDP统一数据平台与GIStack软件平台构建了GIS行业的私有“百度”云盘,实现计算和存储资源动态、高效、安全调配,满足用户海量影像数据的统一存储和管理需求。

海量影像数据统筹管理方案

该方案通过采用分布式存储的技术,将若干通用x86服务器组成存储资源池,利用副本、EC、故障域等多种数据保护功能提供更高安全性的数据存储,同时基于线性扩展的特点,随着未来的持续扩容,存储的整体性能可满足未来业务系统对存储I/O等性能更高的要求。

该方案具有以下特点:

▪ 支持容量与资源的按需扩展,支撑PB甚至ZB级别数据的安全存储;

▪ 支持大文件影像的快速读写,基于S3云优化的影像格式Cloud Optimized GeoTIFF ,实现大文件影像按需读取;

▪ 支持十亿级别文件管理,例如海量无人机影像管理;

▪ 基于XSKY软件定义存储一体机的一体化方案实现更好的性能优化,降低无效投入,提供更高效的服务响应机制;

▪ 提供便捷的标签,实现高效数据组织,提高查询和大数据分析效率;

▪ 提供丰富的大数据应用接口,支撑不同业务场景需求。

在与某主流品牌传统存储产品系列的动态图服务压力对比测试中,在延迟基本相同的情况下,本方案中的影像发布服务的能力提高了600%,拥有极其优异的性能表现。

03GIS应用全场景

不仅仅是影像统筹场景,在更多的GIS应用场景中,基于XSKY的SDS统一数据平台方案,利用原生块,SCSI,iSCSI,FC,S3,SMB,FTP,NFS等多种协议和接口,还可支撑BIM,AI分析,影像处理等各种GIS应用,帮助用户提升从数据采用,数据生产,数据管理,数据发布,到数据应用的全流程处理能力。

未来,XSKY 还将与ESRI以及捷泰天域等合作伙伴持续打造一体化联合解决方案,从数据的组织、存储到利用实现全业务流程的贯通,并以其可靠卓越的性能,端到端的数据安全,十亿级别AI影像数据管理等优势,为GIS行业保驾护航!