HPE Alletra X10000 重新定义横向扩展存储架构

5个月前 科技 32观看
摘要 分析:HPE 的 Alletra MP X10000 对象存储系统代表了一种新型的横向扩展存储硬件,采用了由 VAST Data 首创的分散共享一切 (DASE) 架构。HPE 全球技术与战略架构师 Dimitris Krekoukias 撰写了

分析:HPE 的 Alletra MP X10000 对象存储系统代表了一种新型的横向扩展存储硬件,采用了由 VAST Data 首创的分散共享一切 (DASE) 架构。HPE 全球技术与战略架构师 Dimitris Krekoukias 撰写了一篇博客,详细介绍了其主要特性并解释了设计理念。ci2喜好网-记录每日喜好的科技时尚娱乐生活

他列举了系统的主要特点,包括 RDMA 和用于 S3 的 GPUDirect、数据服务分区、键值存储基础、单一存储桶速度、高吞吐量和小型事务的平衡读写速度、小型写入缓冲等功能。ci2喜好网-记录每日喜好的科技时尚娱乐生活

该系统完全采用 HPE 自主技术构建,而非 OEM 软件或授权硬件。它由基于 ProLiant 的存储服务器控制器节点和独立的全闪存储或容量节点组成,通过 NVMe 内部架构互连,并存在于全局命名空间中。容器化操作系统初期提供对象存储功能,但可以在其基础的日志结构化键值存储之上支持其他协议,未来还可添加更多协议层。ci2喜好网-记录每日喜好的科技时尚娱乐生活

Krekoukias 表示:"这些协议层针对特定协议的语义进行了优化,将每个协议都视为一等公民。这使得 X10000 能够利用每种协议的优势,而不会继承第二种协议的缺点或在协议之上运行其他协议(如对象建立在文件之上,反之亦然)。"ci2喜好网-记录每日喜好的科技时尚娱乐生活

HPE 需要系统通过 RDMA (远程直接内存访问) 和 Nvidia 的 GPUDirect for S3 协议提供对对象数据的快速访问,实现 GPU 服务器对存储驱动器的直接访问。Krekoukias 写道:"与 TCP 相比,这项技术将大大提高性能并显著降低 CPU 需求,使您能够充分利用基础设施,并消除 GPUDirect 管道中的 NAS 瓶颈。"ci2喜好网-记录每日喜好的科技时尚娱乐生活

他声称:"通过三重+纠删码和级联多级校验和(这是首次在 Nimble,随后在 Alletra 5000 和 6000 中出现的保护机制的演进),确保了极高的弹性和数据完整性。"写入缓冲区位于 SSD 而不是 NVRAM 中,"消除了 HA 对的限制"。ci2喜好网-记录每日喜好的科技时尚娱乐生活

每个驱动器被划分为所谓的小型逻辑驱动器或磁盘片,最小可达 1 GB,这些磁盘片被放入 RAID 组中。这些 RAID 组可以限制在一个 JBOF (存储节点) 内,或跨越多个 JBOF 以防止故障。传入数据经过压缩,"通过使用 24 个磁盘片的 RAID 组确保良好的空间效率。"ci2喜好网-记录每日喜好的科技时尚娱乐生活

工作负载被切分为数据服务分区 (DSP),DSP 分片在不同的控制器节点上运行。如果一个或多个控制器节点发生故障,受影响的 DSP "会在剩余控制器之间平稳均匀地重新分配。" 磁盘片 RAID 切片根据需要动态分配给 DSP。ci2喜好网-记录每日喜好的科技时尚娱乐生活

Krekoukias 指出:"由于所有状态仅在 JBOF 中持久化,而节点完全无状态,这种 DSP 的移动只需要几秒钟,并且不涉及数据移动...由于对象基于哈希分布在 DSP 中,性能始终在集群节点之间保持负载均衡。"计算和存储容量可以独立扩展。ci2喜好网-记录每日喜好的科技时尚娱乐生活

除了 GPUDirect for S3 外,性能一直是系统设计的重点。博客告诉我们,"典型的非结构化工作负载(如分析和数据保护)假定每个应用单元(如单个仓库或备份链)使用单个存储桶或少量存储桶。"由于采用了 DSP 分片概念,无需使用多个小存储桶来提高 I/O 性能。ci2喜好网-记录每日喜好的科技时尚娱乐生活

他写道:"X10000 线性扩展单个存储桶的能力意味着单个应用程序能够与大量应用程序或租户一样受益于 X10000 的横向扩展能力。"ci2喜好网-记录每日喜好的科技时尚娱乐生活

HPE 表示,X10000 具有平衡的性能,因为它"旨在提供高吞吐量和小型事务操作的平衡读写性能。这意味着对于重写入工作负载,不需要一个庞大的集群。这带来了针对任何工作负载的优化性能体验,并能够在不造成浪费的情况下达到性能目标。"ci2喜好网-记录每日喜好的科技时尚娱乐生活

系统的"X10000 日志结构化键值存储是基于范围的",并且范围大小可变。范围是一个连续的存储块,可容纳多个键值对,从而提高访问速度。元数据和数据访问也可以适应应用程序边界。ci2喜好网-记录每日喜好的科技时尚娱乐生活

"X10000 的写入缓冲区和索引针对小对象进行了优化。X10000 实现了一个写入缓冲区,小型 PUT 操作首先提交到该缓冲区,然后再暂存到日志结构化存储中,元数据更新则合并到分形索引树中以实现高效更新。"ci2喜好网-记录每日喜好的科技时尚娱乐生活

小对象写入 (PUT) "在暂存到日志结构化、受纠删码保护的存储之前,先提交到 X10000 的写入缓冲区。写入缓冲区的提交降低了小型 PUT 的延迟并减少了写入放大。写入缓冲区存储在与日志结构化存储相同的 SSD 上,由一组磁盘片组成。"ci2喜好网-记录每日喜好的科技时尚娱乐生活

Krekoukias 说:"基于 SSD 的写入缓冲区可以为延迟敏感的结构化数据工作负载提供与 NVDIMM 等先前方法相同的高可靠性和低延迟。"ci2喜好网-记录每日喜好的科技时尚娱乐生活

所有这些设计要点意味着小型 X10000 配置(仅具有 192 TB 原始容量和 3.84 TB SSD)就能获得良好的性能,无需扩大集群规模即可实现高性能。ci2喜好网-记录每日喜好的科技时尚娱乐生活

展开全文
猜你感兴趣
轻薄手机用上潜望!曝vivo S20系列首次搭载潜望长焦镜头

轻薄手机用上潜望!曝vivo S20系列

11月1

11-19 125阅读
OPPO Reno13系列外观详解:蝴蝶紫配色惊艳 超美小OPhone

OPPO Reno13系列外观详解:蝴蝶紫

在结束了

11-19 119阅读
小米发布超级智能驾驶技术Hyper Autonomous Driving(HAD)

小米发布超级智能驾驶技术Hyper

11-19 122阅读
GOG 商店确保经典游戏长期兼容,首批 100 款上线

GOG 商店确保经典游戏长期兼容,首

11-19 134阅读
一家早期科技基金,今年投了10个亿

一家早期科技基金,今年投了10个亿

周期

11-19 109阅读
《山水间的家》:围屋承古韵,老区展新颜!

《山水间的家》:围屋承古韵

  从赣南大地到沂蒙山区,乡土文化在

11-19 107阅读
关晓彤近况臃肿引热议!红发造型太显眼,网友大呼认不出

关晓彤近况臃肿引热议!红发

近日,关晓彤担任金鸡奖开奖嘉宾,在关晓

11-19 116阅读
24岁影后李庚希被喊黑幕!曾被徐静蕾力捧没听倪萍劝告

24岁影后李庚希被喊黑幕!曾

11月16日晚,金鸡奖评选上曝出最大冷门

11-19 116阅读
越南模仿李子柒的博主也停更了三年:前段时间刚回归

越南模仿李子柒的博主也停

11月14日消息,中

11-19 113阅读
日本导演神山健治执导 动画电影《指环王:洛汗之战》内地定档12月14日

日本导演神山健治执导 动

11月19日消息,今

11-19 122阅读
360浏览器兼容模式怎么设置?360浏览器极速模式怎么开?一文看懂

360浏览器兼容模式怎么设

360浏览器是我们使用最多的一款浏览器

11-19 126阅读
保卫萝卜4太空穿越4关通关攻略

保卫萝卜4太空穿越4关通关

保卫萝卜4是最新发布的游戏,相信喜欢保

11-19 134阅读
小小突击队礼包码,小小突击队周年礼包码2023.9

小小突击队礼包码,小小突击

小小突击队礼包码来啦!这次为大家带来的

11-19 108阅读
饥荒体温过高怎么办?饥荒所有降低体温的方法分享

饥荒体温过高怎么办?饥荒

饥荒体温过高怎么办?饥荒游戏里面拥有体

11-19 113阅读
饥荒石头怎么大量获得?饥荒快速获得大量石头的技巧分享

饥荒石头怎么大量获得?饥

饥荒石头怎么大量获得?石头是饥荒游戏里

11-19 120阅读