Top
首页 > 正文

被BAT集体看好的对象存储,有什么了不起?

如今,浪潮超大规模数据中心级分布式存储平台AS13000G5的对象存储功能已在河南移动云存储、安徽电信云存储、某医院远程医疗、某互联网云业务等项目中有了积累与沉淀。
发布时间:2019-08-15 16:35 来源: 作者:xupy

背景:当网盘、跑游戏、做备份、存视频……云数智趋势下,对象存储过得风生水起,从BAT的公有云到企业私有云都有出镜。IDC中国SDS市场数据显示,2018年对象存储增长率超过150%,2019Q1对象存储在中国SDS市场占据19.6%的份额,实现了“very fast”的增长。

1
IDC:2019Q1对象存储在中国SDS市场占19.6%市场份额

对象存储(Object Storage Service,OSS),也叫基于对象的存储,是一种解决和处理离散单元的方法,可提供基于分布式系统之上的对象形式的数据存储服务。对象存储和我们经常接触到的块和文件系统等存储形态不同,它提供RESTful API数据读写接口及丰富的SDK接口,并且常以网络服务的形式提供数据的访问。简单理解,对象存储类似酒店的代客泊车。顾客(前端应用)把车钥匙交给服务生,换来一张收据(对象的标识符)。顾客不用关心车(数据)具体停在哪个车位,这样省事儿、省时间。

2
对象存储,在云数智驱动下高速发展

早些年,传统数据中心主要是烟囱式架构,系统扩展性较差加上过去硬盘容量偏小、价格偏高,企业主要用存储保存关键数据,对象存储一直不温不火。在新数据时代,传统数据中心向云计算、大数据、人工智能转变,越来越多的应用和企业在使用新的存储形态,“对象存储”这个词变得炙手可热。

在云计算领域,公有云服务商都不约而同支持对象存储。百度云通过对象存储提供数据分发、备份、分析等服务并支持单文件最大5TB的文本、多媒体、二进制等任何类型的数据存储;阿里云使用对象存储的RESTfulAPI接口,可以提供在互联网任何位置存储和访问数据;Amazon S3使用对象存储提供空间租赁服务等等。

行业企业也在推进对象存储解决方案,用它进行数据备份、分级存储和数据归档。浪潮存储给远程医疗、媒资图片抓取、电信云存储、高校网盘等行业新应用都提供了对象存储。比如,某视频公司采用对象存储构建视频云存储方案,在提供“6个9”的可靠性的同时,支撑前端以容器方式提供了丰富的微服务,实现分钟级集群组装与部署,秒级弹性反应。又如,河南省人力资源和社会保障厅采用S3协议的对象存储,承载全省电子档案,满足约80万终端的并发上传需求。

可以说,对象存储作为新的存储类型,技术不断升级、应用规模日益扩大。Gartner预测,到 2021年,80%的企业数据将存储在包括对象存储在内的横向扩展存储系统中。

对象存储 有什么了不起?

作为新数据时代的新存储形态,相比SAN和NAS,对象存储有哪些优势?这可能是很多IT人关心的话题。要揭开这个谜题,可以从这几种存储形态的系统结构、数据管理、数据访问等维度进行探索。

3
SAN、NAS、对象存储对比

对比对象存储与SAN和NAS的差别,不难看出对象存储的核心优势所在:对象存储直接提供API给应用使用,采用扁平化的结构管理所有桶(Bucket)和对象。每个桶和对象都有一个全局唯一的ID,根据ID可快速实现对象的查找和数据的访问。对象存储支持基于策略的自动化管理机制,使得每个应用可根据业务需要动态地控制每个桶的数据冗余策略、数据访问权限控制及数据生命周期管理。正是这些优势使得对象存储具备极致的扩展和极易的数据管理,在新数据时代如鱼得水。

浪潮对象存储:极致特性+高级功能

当然,对象存储实现起来并非轻而易举,在技术特性、软件功能上需要不断打磨。作为全球前五的存储厂商,浪潮存储在存储新技术、新应用上不断加大投入,3年研发投入超10亿元。这种在产品创新上的“死磕”,使得浪潮存储在对象存储的技术创新方面别具优势。

4
浪潮AS13000G5的对象存储功能

浪潮超大规模数据中心级分布式存储平台AS13000G5可提供对象存储服务,具备极致可靠、极致性能、极致安全、极易管理四大极致特性。在此基础上,还提供了诸多高级特性。这就好比一栋建筑,不光要地基打得牢、房子盖得结实,还要在装修上下功夫,符合入住者的个性化需求。

面向对象存储,浪潮AS13000G5开发了大量高级特性。一是小对象聚合。浪潮对象存储针对海量小文件场景,通过小对象聚合,节约HDD的磁盘IO,提升存储效率。二是读Cache加速。在卡口图片、AI计算场景,通过读Cache加速提升数据读取效率。三是元数据检索。在存储系统内集成索引引擎,实现根据对象元数据多条件模糊检索对象的技术,有效地提升了海量非结构化数据中“大海捞针”的效率。四是企业级WORM,满足企业客户数据的法规性要求,结合应用特点,灵活设置宽限期和保护期。此外,还有异地容灾、存储OS加固、桶策略配置等等。对象存储技术的不断迭代升级,让浪潮对象存储进入用户视野,服务行业智慧转型。

“浪潮存储走的是软硬件一体化的形式,统一交付给用户一个方案。浪潮AS13000G5提出了‘5+X’的说法,用一个软件栈融合包括对象在内的五种形态数据,在此基础上希望把整个分布式存储生态做好。我们会跟很多原生的分布式应用做高度的融合部署,当交付给用户的时候就是一体化的方案”。浪潮分布式存储产品总监赵帅如是说。

事实上,“5+X”是浪潮超大规模数据中心级分布式存储平台AS13000G5的最大特色。软件层上,AS13000G5融合文件、对象、块、HDFS、数据库协议5种服务协议及X种融合平台。硬件层融合机架式、高密式、机柜式、多节点式、边缘式5种硬件形态及X种硬件配置,可充分释放AS13000G5的潜能,实现容量按需扩展、性能按需供给、服务按需定义。

百搭新场景:网盘、备份、大数据分析、视频云

除了对象存储技术上的领先,浪潮AS13000G5在对象存储的“场景化”方面也走在了行业前列。

在备份归档场景,浪潮对象存储功能可提供低成本、高可靠的存储资源,根据备份和归档需求不同,可以选择不同类型的存储使用,优化TCO。

在上传和下载比较频繁的网盘场景,浪潮对象存储功能可随用户数据量的提高而自动扩容,较高的并发能够避免访问时延长或者服务不可用的情况出现。

在视频云场景,浪潮对象存储功能契合了视频领域RESTful API、过期删除特性和一次写入多次读取的需求场景。

在大数据分析场景,浪潮对象存储功能可与Hadoop大数据应用配合使用,根据需求调整规模和提高创新速度,帮助企业管理大数据。

如今,浪潮超大规模数据中心级分布式存储平台AS13000G5的对象存储功能已在河南移动云存储、安徽电信云存储、某医院远程医疗、某互联网云业务等项目中有了积累与沉淀。

IDC预测,未来5年,对象存储在中国SDS市场的增长率都将是最高的。可以说,进入新数据时代,云数智应用场景越来越丰富,数据规模像“滚雪球”一样在扩大,对象存储的优势将进一步放大,驶入发展快车道。

合作站点
stat
Baidu
map