【摘 要】
:
分布式存储系统作为一种可以存储海量数据并提供便捷数据访问的服务在大数据时代被广泛应用。由于系统庞大而导致数据丢失的情况时有发生,系统一般采用纠删码的方式来进行数据存储并冗余。但是纠删码存在数据修复计算开销大,网络负载高,修复速度低等问题。本文针对以上问题,对纠删码的单节点预先修复和混合纠删码修复技术进行了深入研究,主要研究与贡献如下:(1)针对纠删码修复速度慢而导致系统可靠性降低问题,本文在预先重
论文部分内容阅读
分布式存储系统作为一种可以存储海量数据并提供便捷数据访问的服务在大数据时代被广泛应用。由于系统庞大而导致数据丢失的情况时有发生,系统一般采用纠删码的方式来进行数据存储并冗余。但是纠删码存在数据修复计算开销大,网络负载高,修复速度低等问题。本文针对以上问题,对纠删码的单节点预先修复和混合纠删码修复技术进行了深入研究,主要研究与贡献如下:(1)针对纠删码修复速度慢而导致系统可靠性降低问题,本文在预先重建与迁移修复的基础上,改进预先修复算法使其适应快速变化的网络环境,提出了划分迁移集和重建集算法SMSRS,并引入多级中继传输概念提出了改进的多级传输调度算法ISA加速修复任务数据的传输。实验结果表明,本文提出的划分算法和调度技术较传统方法修复时间降低了 7.2%~13.2%。(2)针对传统单一纠删码修复技术的退化读高延迟问题,本文在传统混合纠删码LRC&HH码的基础上,提出了一种可感知数据热度的负载动态自适应的混合纠删码数据修复技术。该技术根据实际存储系统I/O特点,定义了读写负载模式和修复负载模式,通过建模分析编码分配规则和动态队列划分冷热数据算法提出负载自适应策略,并结合编码切换算法进而提升系统数据修复速度。实验结果表明,本文提出的负载自适应策略,相比于现有的LRC&HH码随机切换策略,修复时间降低了6.8%~18.7%。(3)基于上述理论研究成果,设计实现了一个基于混合纠删码的容错存储原型系统。该系统含有多种混合纠删码方案,包括HACFS、EC-Fusion以及LRC&HH,支持相应的扩展接口,支持修复调度中的重建与迁移的融合。系统包含以下模块:存储中心架构,节点故障模型,混合纠删码策略,节点放置策略,可靠性度量指标,事件处理模式。系统可接受含存储中心架构、混合纠删码策略和冗余设置等参数,并且可以定量地分析各种纠删码方案之间的可靠性量化指标。实验结果表明,基于预先修复的混合纠删码方案与传统单一纠删码相比可以提升系统可靠性,其中PDL参数降低了 30%~35%,NOMDL 降低了 40%~42.5%,BR 降低了 35.6%~37.8%。
其他文献
与一般的文学作品相比,儿童文学因其特殊的读者群体,拥有着独特的特点。儿童文学对儿童的健康成长有着极大的影响,儿童文学用诙谐幽默的语言向儿童科普生活常识,帮助儿童树立正确的价值观念,用生动的人物形象来激发儿童阅读的兴趣与求知欲,以拓宽儿童的知识面。而儿童文学译本是我国儿童文学库的重要组成部分,将国外的儿童文学作品译入中国也有助于帮助我国儿童树立国际意识,了解更多的社会风俗和常识。但是近年来,相较于其
第一部分:脑脊液GeneXpert检测方法在结核性脑膜炎诊断中的效能分析目的:评估脑脊液GeneXpert检测方法在早期结核性脑膜炎(Tuberculous meningitis,TBM)中的诊断价值,为临床医生诊断TBM提供新的依据。方法:选择2016年1月至2021年1月*******收治的疑似TBM的185例患者,通过电子病例系统回顾性收集所有患者应用抗酸染色法、液体培养法、TB-DNA法以
可能补语是汉语中一种独特的而且使用频率较高的结构形式,因此是对外汉语教学的重点。但对于老挝学生来说,可能补语也是一个很难的语法点,学生不仅会把可能补语和其他语言结构形式相混淆,甚至还会采取回避的态度,而“产出导向法”注重产出的特点可以很好地解决这些问题。我们考察了老挝苏州大学、老挝国立大学孔子学院、占芭老挝语-汉语培训中心的一线教师进行汉语可能补语教学的现状,发现教师的教学模式总体较为传统,教学效
随着物联网技术蓬勃发展,无线监测传感系统在野外围栏、石油管线、桥梁等安全运营监测领域应用广泛,但能源供应受限问题一定程度上制约了其部署,利用环境振动蕴含的能量与信息构建智能无线监测传感系统是国内外重要研究方向。压电振动能量采集器采集环境振动能的同时感知振动信息,开展基于压电振动能量采集器的智能感知无线监测传感系统具有重要研究意义。对于野外围栏监测等应用场景,本文在充分研究压电振动能量采集器输出特性
本报告选取2020年江南大学黄晓丹副教授在《一席》平台上所做的题为《屈原:时间的焦虑》的讲座为模拟汉英交替传译实践材料。在目的论指导下,本报告探索可行且有效的口译策略以解决模拟实践过程中出现的口译难点。学术讲座《屈原:时间的焦虑》的主题是屈原及其名篇《离骚》,其中包含大量的历史、文化和文学知识,诗词,文化负载词,各种引用等。此讲座中国文化内涵丰富,对其进行模拟交替传译能让外国观众更加了解中国,促进
改革开放以来来,随着中国经济的蓬勃发展,人民群众对于便捷生活及快速出行的需求不断增加。互联网经济带来了对于物流效率提升的需求,时代的发展带来了对于高效交通的要求,从而全面推动了高速公路日新月异的建设与发展,对高速公路的运营与交通管理提出了新问题。苏州绕城高速公路,全长约188公里,共有互通出入口22个,枢纽6个,服务区3个,为江苏省“五纵九横五联”高速路网的重要组成部分,是环太湖“二环六射”高速路
由于客观世界及人类社会的复杂性,许多动作行为并非由个体独立完成,而是多个成员在伴随状态下实现的,因此“伴随”行为和状态是普遍存在的一种客观现象。当人类体认这种现象并将之概念化后,便在语言中通过编码、加工形成表示“伴随”概念的范畴。“伴随范畴”属于句法-语义范畴。汉语中表达伴随范畴的语法手段主要有介词(“与、和、同、及、跟”)和副词(“一起、一块、一齐、一同、一道”)两种。本文重点考察后一种,即汉语
现代法治的构建需要依赖一套合理有效的法律方法作为支撑,中国传统法律方法尤其是律学方法是探索这套法律方法的有益资源。《唐律疏议》作为我国古典法律的集大成者,其自身同样蕴含了一套独特、成熟的法律方法。以现代法治为立场,以法律方法为主题,以《唐律疏议》为主要考察对象,梳理和探究中国古典法律方法论,对于构建一套有益于现代法治的法律方法论具有重要的理论和实践意义。《唐律疏议》中的古代法律方法主要包括立法方法
信任对于人类的社会交往具有重要意义,是个体之间沟通的桥梁。人们在初次相遇时,即可通过对方的面孔、语音等线索对其可信度进行快速推断。虽然在视觉领域关于可信度的研究已经取得较大进展,但基于听觉通道对可信度的研究仍然较少。大量的证据表明可信度是多模态的认知体验,语音可信度在人际交往中同样发挥着至关重要的作用。其中,声音参数对语音可信度的判断起着重要作用。因此,本研究将就语速和音高改变对语音可信度的影响展
《昆剧穿戴》是记载早年苏州“全福班”及昆曲传习所常演剧目中人物装扮的著作。然而,学界对此书却少有关注,为弥补这一研究缺环,笔者从其文本内容入手,结合其他相关资料,以及演出应用情况,力图对《昆剧穿戴》作全面深入的研究。由于《审音鉴古录》附带的“穿关”[1]也提供了对昆剧演出人物穿戴较完备的记录,且成书的时代比《昆剧穿戴》早。因此,笔者将其纳入研究,将两本书中的服饰名目、人物装扮规律进行了对比研究,发