盖蒂图片社

管理 学习应用最佳实践并优化您的操作。

揭开分布式文件系统和对象存储市场的神秘面纱

寻找支持对象存储的分布式文件系统的IT团队必须仔细规划他们的需求——并记住没有两个产品是完全相同的。

在当今的动态数据存储市场,以一种有意义的方式对产品进行分类是一个挑战。即使产品在本质上很相似,它们也往往有不同的标签和描述。

当涉及到分布式文件系统时尤其如此对象存储市场

存储管理员理解这类产品的唯一方法是深入了解供应商提供的产品的细节,确定它们确切地提供了什么,并衡量它们是否满足了数据存储需求。

广阔多样的市场

分析公司Gartner发布了一份报告关于分布式文件系统和对象存储。该报告是高德纳公司(Gartner)“魔力象限”(Magic Quadrant)系列市场研究的一部分,包括戴尔(Dell Technologies)和IBM等多家存储产品和供应商。

该公司将分布式文件系统和对象存储产品描述为基于分布式架构的软件和硬件平台,使用对象和/或扩展文件技术来支持非结构化数据的增长。Gartner进一步将这些产品划分为能够分发、复制或erasure-code网络上的数据和元数据,以及集群中不同节点上的数据和元数据。

即使有了这些限定符,产品类别仍然是广泛且难以定义的。例如,Dell Technologies以不同的方式描述其PowerScale和ECS产品——这两种产品都包含在用于分布式文件系统和对象存储的Magic Quadrant中。供应商将PowerScale描述为一个横向扩展的NAS平台,将ECS描述为一个软件定义的云级对象存储平台。

产品的异同

在Gartner的报告中,产品之间的主要共同点是,每个产品都构建在分布式计算体系结构上,并合并或支持对象存储。然而,存在着显著的差异。

例如,Dell EMC PowerScale就是NAS系列产品。OneFS操作系统运行在PowerScale集群的每个节点上。操作系统提供了一个软件定义的架构,可以大规模存储、管理、保护和分析数据。OneFS对集群组件进行编排,并提供统一的存储池来整合数据。操作系统支持多种行业标准协议进行基于文件的访问。它还包括亚马逊简单存储服务(S3)——AWS云中的对象存储服务——作为一级协议,在文件服务引擎之上实现。由于这种设计,基于文件和基于对象的应用程序都可以访问同一平台上的文件系统。

与PowerScale不同的是,IBM Spectrum Scale只提供软件,并提供多种数据服务。其核心是全球性的并行文件系统基于IBM的通用并行文件系统。Spectrum Scale使得将闪存、硬盘、云和磁带存储结合到一个统一的环境中成为可能,从而提供跨平台的弹性、可伸缩性和控制。根据IBM的说法,文件系统可以处理数万个客户端、数十亿个文件和yottabytes字节的数据,并包括文件、对象和Hadoop分布式文件系统访问接口。对于对象访问,Spectrum Scale支持OpenStack迅速和S3接口,支持与任何Swift或S3存储系统进行分级。

NetApp采用了另一种分布式存储方法StorageGrid,这是一种对象存储系统,使组织能够非结构化数据管理跨混合和多云环境。管理员可以将StorageGrid部署为虚拟设备或硬件设备,也可以部署在Docker容器中。他们可以在裸金属或虚拟机上运行。StorageGrid提供了一个可以跨越16个全局数据中心的名称空间,并包含集成的生命周期管理策略来优化数据驻留的位置。StorageGrid还支持S3 API特性,如对象版本控制、多部分上传和对象标记。

还有其他产品——包括Panzura和Nasuni的产品——不属于2020年的Magic Quadrant,但也符合分布式文件系统和对象存储的标准。

Panzura提供了基于CloudFS文件系统的高性能存储产品。该公司将CloudFS描述为具有单个名称空间的全局云文件系统。CloudFS促进了可伸缩的多站点部署,同时提供了跨公共和私有云的数据一致性。CloudFS在每个位置缓存经常使用的文件,以优化现场性能,同时提供可大规模操作的单一权威数据源。Panzura系统的行为类似于企业NAS,具有标准的Windows文件共享,但没有NAS的地理限制

与此同时,Nasuni系统包括UniFS,一个云本地的全局文件系统,它将所有数据存储在公共或私有云对象存储中。UniFS还使用专门设计的设备在本地缓存活动文件。然而,根据该公司的说法,像UniFS这样的全局文件系统与分布式文件系统或全局名称空间不同。这些模型将文件绑定到特定的硬件部分,通过分布式文件系统或全局名称空间发现并指导对文件的访问。使用全局文件系统时,文件不会绑定到硬件上。

Quobyte和LucidLink文件空间也可以被视为包含对象存储的分布式文件系统。Quobyte将其产品描述为可以管理数百拍字节数据的软件存储系统,LucidLink将文件空间描述为对象存储的分布式全局文件系统。

深入挖掘对象存储

搜索灾难复苏
搜索数据备份
搜索聚合基础设施
关闭
Baidu