基于组合设计工具 PBD 的数据布局 PDL Hadoop-PDL

Apache
Java
跨平台
2021-09-09
osc_87402377

该项目提出了一种有效的基于组合设计工具 PBD (Pairwise Block Design) 的数据布局 PDL,以加快混合 EC 分布式存储系统中单节点故障的数据修复。

由于减少了机架间的通信量,并在修复过程中实现了读写 I/O 的负载平衡,因此它实现了几乎均匀的数据分布以及更高的修复性能。我们设计了数据的放置策略以及相应的故障恢复方案,并且在 Hadoop 3.1.1 中实现了它们。

加载中

暂无资讯

暂无问答

暂无博客

返回顶部
顶部