华为终结SSD大盘数据重构难题:能雕花、会自愈
创始人
2024-08-20 03:40:43

快科技8月19日消息,在通常的分布式存储中,当系统检测到硬盘故障时,系统会采用EC(Erasure Coding)纠删码等冗余校验手段,利用其余节点上的正常硬盘、正常数据,在后台跨节点地将整块硬盘的故障数据重构出来。

然而,随着SSD容量逐步增大,大盘需要重构的数据量翻了4~8倍、耗费时长也等比例上升。

在这个漫长的重构周期里,不仅挤占25%存储带宽、影响业务性能,且更致命的是,系统将处于可靠性降级状态,数据将会面临随时丢失。

今天,华为介绍了全闪分布式存储,对SSD的故障域实施局部隔离,尽可能避免原先的大范围的整盘重构。

针对盘内DDR的失效,华为创新地采用TRR(Tiny Region Reconstruction,最小范围重构)算法,通过盘控深度配合,精准识别并上报失效区域所映射的逻辑地址,然后通知存储系统,对受影响的局部数据进行屏蔽。

这个过程,就像在硬盘上“精密镂刻”一样,然后在新的位置精准重构出这一小部分数据。这,就避免了过去动辄整盘重构,让其余正常数据“免遭牵连”,减少了数百倍的重构数据量,整个过程几分钟就能搞定。

针对NAND Flash的失效,华为也采用自研的“盘内RAID算法”,对盘上所有数据以Die为单位,建立RAID组冗余校验。我们将故障范围精准缩小到Die级,利用其余正常的Die、通过盘内计算引擎恢复出正确的数据。

这项技术的厉害之处在于,这个过程可以不断重复,允许Die一个接一个地失效,持续缩列、甚至缩容而不丢失任何数据。这个操作完全发生在SSD盘内,上层存储系统那个“大佬”根本无需插手,完全不知道底下这么热闹。

假如遇上多个Die同时失效、或者整个颗粒失效的极端情况,那SSD单盘就兜不住了,但系统自然也有备而来。存储系统会立刻启动TRR算法,进行局部数据的“镂刻”和“填坑”,做到精准屏蔽、并进行计划性预拷贝重构。

⚠️
本网站信息内容及素材来源于网络采集或用户发布,如涉及侵权,请及时联系我们,发送链接至2697952338@QQ.COM,我们将第一时间进行核实与删除处理。

相关内容

热门资讯

国家级案例!麦麦科技集团农业A... 近日,农业农村部公布了2025年智慧农业典型案例,麦麦科技集团旗下湖北麦麦农业科技有限公司(以下简称...
杭州高能云投顾是正规公司吗?诱... 杭州高能云投顾是正规公司吗?诱导股民交服务费!血汗钱被骗被套!退费有方法分享给你!  股市行情持续低...
富禄订购app无期货交易资质违... 富禄订购app无期货交易资质违法开展期货交易平台亏损完了怎么退?找大卫可以追回亏损,维权流程公布!富...
股掌柜证券咨询可靠吗警惕“投顾... 股掌柜证券咨询可靠吗警惕“投顾服务费”与“智能选股”工具捆绑股掌柜证券不可信,推荐的股票不靠谱,交的...
斗金订购APP坑人价格操控不正... 斗金订购APP坑人价格操控不正规输的钱怎么要回来?找大卫可以追回亏损,成功退款流程!白银投资里,高额...
股掌柜是正规的荐股平台吗荐股实... 股掌柜是正规的荐股平台吗荐股实力不可信,股民误入陷阱可解除合作退费!股掌柜证券不可信,推荐的股票不靠...
前董事锐评为何英特尔代工难吸引... IT之家 12 月 22 日消息,据外媒 Wccftech 今晚报道,英特尔前董事大卫・约菲指出,英...
中和应泰正规吗诱导投资数据不真...  中和应泰正规吗诱导投资数据不真实投资白银亏的钱可以退款!,不成功不收费退款流程!上海中和应泰证券实...
烛龙订购APP违规开展类期货交... 烛龙订购APP违规开展类期货交易续费高输的钱怎么要回来?不着急亏损的钱能退,成功退款方法!掌上银牛A...
湖南金证推荐的股票怎么样如何拿...   湖南金证推荐的股票怎么样如何拿回服务费,交费荐股被骗亏损有猫腻!可退款!  股市行情持续低迷,给...