HPE Alletra X10000 重新定义横向扩展存储硬件

2个月前 科技 19观看
摘要 分析:HPE 的 Alletra MP X10000 对象存储系统代表了一类采用 VAST Data 开创的分离式共享一切 (DASE) 架构的新型横向扩展存储硬件。HPE 全球技术与战略架构师 Dimitris Krekoukias 撰写了一

分析:HPE 的 Alletra MP X10000 对象存储系统代表了一类采用 VAST Data 开创的分离式共享一切 (DASE) 架构的新型横向扩展存储硬件。HPE 全球技术与战略架构师 Dimitris Krekoukias 撰写了一篇博客,详细介绍了其主要特性及其设计理念。wfU喜好网-记录每日喜好的科技时尚娱乐生活

他列举了系统的关键特性,包括用于 S3 的 RDMA 和 GPUDirect、数据服务分区、键值存储基础、单一存储桶速度、高吞吐量和小型事务的平衡读写速度、小型写入缓冲等功能。wfU喜好网-记录每日喜好的科技时尚娱乐生活

该系统采用 HPE 自主技术构建,而非 OEM 软件或授权硬件。它由基于 ProLiant 的存储服务器控制器节点和独立的全闪存储或容量节点组成,通过 NVMe 内部架构互联,并存在于全局命名空间中。容器化操作系统最初提供对象存储功能,但可以在其基础日志结构化键值存储之上支持其他协议,并可添加额外的协议层。wfU喜好网-记录每日喜好的科技时尚娱乐生活

Krekoukias 表示:"这些协议层针对特定协议的语义进行了优化,将每个协议都视为一等公民。这使 X10000 能够充分利用每个协议的优势,而不会继承第二个协议的缺点或在协议之上运行其他协议(如对象协议在文件协议之上或反之)。"wfU喜好网-记录每日喜好的科技时尚娱乐生活

HPE 需要系统能够使用 RDMA (远程直接内存访问) 和 Nvidia 的 GPUDirect for S3 协议快速访问对象数据,为 GPU 服务器提供直接存储驱动器访问。Krekoukias 写道:"与 TCP 相比,这项技术将大大提升性能并显著降低 CPU 需求,使您能够更充分地利用基础设施,并消除 GPUDirect 管道中的 NAS 瓶颈。"wfU喜好网-记录每日喜好的科技时尚娱乐生活

他声称:"通过三重以上纠删码和级联多级校验和(这是从 Nimble 以及后来的 Alletra 5000 和 6000 首次看到的保护机制的演进),确保了极致的弹性和数据完整性。"写入缓冲区位于 SSD 而不是 NVRAM 中,"消除了 HA 对的限制。"wfU喜好网-记录每日喜好的科技时尚娱乐生活

每个驱动器被分区为所谓的小型逻辑驱动器或磁盘片,小至 1 GB,这些磁盘片被放入 RAID 组中。这些 RAID 组可以限制在一个 JBOF (存储节点) 内,或跨越多个 JBOF 以防止故障。输入数据经过压缩,"通过使用 24 个磁盘片的 RAID 组确保良好的空间效率。"wfU喜好网-记录每日喜好的科技时尚娱乐生活

工作负载被切分为数据服务分区 (DSP),DSP 分片在独立的控制器节点上运行。如果一个或多个控制器节点失效,受影响的 DSP "只需在剩余控制器之间进行均匀重新分配即可。"磁盘片 RAID 切片根据需要动态分配给 DSP。wfU喜好网-记录每日喜好的科技时尚娱乐生活

Krekoukias 指出:"由于所有状态仅在 JBOF 中持久化,节点完全无状态,因此 DSP 的移动只需几秒钟,且不涉及数据移动...由于对象基于哈希分布在 DSP 中,性能始终在集群节点间保持负载均衡。"计算和存储容量可以独立扩展。wfU喜好网-记录每日喜好的科技时尚娱乐生活

除了 GPUDirect for S3 外,性能一直是系统设计的重点。博客告诉我们,"典型的非结构化工作负载,如分析和数据保护,假定每个应用单元(如单个仓库或备份链)使用单个存储桶或少量存储桶。"由于 DSP 分片概念,无需使用多个小型存储桶来提高 I/O 性能。wfU喜好网-记录每日喜好的科技时尚娱乐生活

他写道:"X10000 线性扩展单个存储桶的能力意味着单个应用程序与大量应用程序或租户一样,都能从 X10000 的横向扩展能力中受益。"wfU喜好网-记录每日喜好的科技时尚娱乐生活

HPE 表示,X10000 具有平衡的性能,因为它"旨在提供平衡的读写性能,既适用于高吞吐量,也适用于小型事务操作。这意味着对于重写入工作负载,不需要大规模集群。这带来了针对任何工作负载的优化性能体验,并能够在不浪费资源的情况下达到性能目标。"wfU喜好网-记录每日喜好的科技时尚娱乐生活

该系统的"X10000 日志结构化键值存储是基于区段的",区段大小可变。区段是一个连续的存储块,可容纳多个键值对,从而提高访问速度。元数据和数据访问也可以适应应用程序边界。wfU喜好网-记录每日喜好的科技时尚娱乐生活

"X10000 的写入缓冲区和索引针对小对象进行了优化。X10000 实现了一个写入缓冲区,小型 PUT 操作首先提交到该缓冲区,然后再归档到日志结构化存储中,元数据更新则合并到分形索引树中以实现高效更新。"wfU喜好网-记录每日喜好的科技时尚娱乐生活

小对象写入 (PUT) "在归档到日志结构化、受纠删码保护的存储之前,先提交到 X10000 的写入缓冲区。写入缓冲区提交可减少小型 PUT 的延迟并降低写入放大。写入缓冲区存储在与日志结构化存储相同的 SSD 上,由一组磁盘片组成。"wfU喜好网-记录每日喜好的科技时尚娱乐生活

Krekoukias 表示:"基于 SSD 的写入缓冲区可以为延迟敏感的结构化数据工作负载提供与 NVDIMM 等先前方法相同的高可靠性和低延迟。"wfU喜好网-记录每日喜好的科技时尚娱乐生活

所有这些设计要点意味着小型 X10000 配置(仅具有 192 TB 原始容量和 3.84 TB SSD)就能获得良好的性能,无需扩大集群规模即可实现高性能。wfU喜好网-记录每日喜好的科技时尚娱乐生活

展开全文
猜你感兴趣
智己汽车携手Momenta联合打造“一段式端到端直觉智驾大模型”

智己汽车携手Momenta联合打造“

【锋巢网】10月28日,在品牌智能驾

11-19 65阅读
北上广深一线城市爱买啥车 北京喜欢比亚迪、上海广州更爱特斯拉

北上广深一线城市爱买啥车 北京

11月19日

11-19 67阅读
‌全新宝马2系Gran Coupé国产版明年上市

‌全新宝马2系Gran Coupé国产版

11-19 72阅读
“抽象”主播为何爆火?

“抽象”主播为何爆火?

前不

11-19 71阅读
「西图之光」获近千万元A轮融资

「西图之光」获近千万元A轮融资

【投

11-19 68阅读
莎拉波娃涉嫌欺诈? 网球巨星竟有这样的污点究竟是怎么回事

莎拉波娃涉嫌欺诈? 网球巨

如果是非常关注体育界的话,莎拉波

11-19 66阅读
李宇春与康姆士乐队合唱《恐龙一样勇敢》 讲述小女孩与病魔抗争的故事

李宇春与康姆士乐队合唱《

  《有歌2024》第五期,李宇春和康姆

11-19 64阅读
VaVa毛衍七主理女子嘻哈厂牌Herstory Gals首支Cypher《Herstory》上线

VaVa毛衍七主理女子嘻哈厂

  10月29日,由种梦音乐D.M.G艺人Va

11-19 68阅读
《好东西》豆瓣9.1,放映时观众数次鼓掌,导演:桥段全靠硬编

《好东西》豆瓣9.1,放映时

邵艺辉自编自导,宋佳、钟楚曦、章宇、

11-19 70阅读
苦等七年终于来了!《白夜破晓》长丰集结海报出炉:潘粤明主演

苦等七年终于来了!《白夜破

11月17日消息,时

11-19 59阅读
卧龙苍天陨落全章节龙脉晶石所在位置详细介绍

卧龙苍天陨落全章节龙脉晶

龙脉晶石是卧龙苍天陨落游戏里面的特殊

11-19 72阅读
原神终将结束的花神诞祭全任务攻略一览

原神终将结束的花神诞祭全

终将结束的花神诞祭是原神须弥地区主线

11-19 67阅读
原子之心芭蕾舞者谜题攻略_芭蕾舞者舞姿调整攻略

原子之心芭蕾舞者谜题攻略

原子之心游戏里面玩家会在剧院中碰到一

11-19 70阅读
原神尽在咫尺的目标任务怎么做|尽在咫尺的目标任务攻略

原神尽在咫尺的目标任务怎

尽在咫尺的目标是原神须弥地区魔神主线

11-19 65阅读
原神愚人者人愚之任务攻略|愚人者人愚之隐藏任务详解

原神愚人者人愚之任务攻略

愚人者人愚之是原神须弥地区的隐藏任务

11-19 66阅读