面向非结构化分布式存储系统的性能分析系统研究

来源 :复旦大学 | 被引量 : 0次 | 上传用户:njcxm
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着互联网应用的发展,尤其是近几年来海量级数据规模的应用不断出现,非结构化数据存储和处理需求迅速增长,这些新的海量数据应用对数据存储有了新的需求,传统关系型数据库逐渐暴露出一些缺陷,不能很好地满足这些新的应用需求。非结构化分布式存储技术(NOSQL, Not Only SQL),是针对以上应用需求而产生的,是一种全新的非关系型的分布式存储技术,采用新的数据模型,具有海量数据存储、高性能、高可用性、强伸缩性等特点。非结构化分布式存储技术的产生不是为了取代传统的关系型数据库系统,两者的应用场景是不同的。当前许多非结构化分布式存储系统已经用于这些海量数据规模的应用。近年来,随着非结构化分布式存储系统被越来越多的企业与个人关注,对非结构化分布式存储系统的性能分析与调优也成为了业界的热点研究问题。在分布式环境中,如何对这类系统进行有效的性能分析与评测,以实现对非结构化分布式存储系统性能的调优,对非结构化分布式存储技术不断发展有着重要意义。我们对现有的性能分析方法、系统进行了分析,针对现有的性能分析方法或系统对非结构化分布式存储系统进行性能分析的不足,提出了一种新的面向非结构化分布式存储系统的性能分析方案。在分布式环境中,将非结构化分布式存储系统的客户端性能数据与服务器端数据流处理活动相关联,对系统进行深入的性能分析与评测。在任务执行过程中,采用基于数据流的分布式插装机制监测服务器端的运行时行为与数据流处理活动,并与客户端收集到的性能数据关联到同一时间轴上,对非结构化分布式存储系统进行更底层更深入的性能分析,帮助开发人员寻找与确定潜在的优化点,以实现对非结构化分布式存储系统的性能调优。本文所提出的性能分析方案优点在于:首先是轻量级的、具有较好伸缩性的性能分析系统。其次,不修改非结构化分布式存储系统的任何源代码,具有较好的扩展性。最后,性能分析系统的运行开销是非常低的,通过评测,对非结构化分布式存储系统性能造成的影响不到1%,可以忽略性能分析系统运行对非结构化分布式存储系统造成的性能影响。在实验中,我们通过具体的案例,详细阐释了本文的性能分析系统怎样帮助用户进行性能分析,发现潜在优化点以实现系统
其他文献
为推动思政课互动式教学改革创新,增强思政课的思想性、理论性和亲和力、针对性,思政课互动式教学改革要以"主导性和主体性相统一"为引领,发挥教师的主导性作用和学生的主体
临床路径(clinical pathway, CP)已在我国大型医疗机构广泛开展,作为一种标准化管理模式,其在保障医疗质量的同时,降低了医疗成本,节约了医疗资源;基层医院的医院管理及临床工作有其
智能手机已成为人们"生活、学习、消费、决策"的重要支撑,智能化无边界资讯时代,既带来各种便利,又带来难以决策取舍的烦恼。针对海量信息,充分认识时代的经济社会形态特征,
对于多气缸发动机,单缸进气量决定了发动机输出转矩并且直接影响了空燃比输出。特别是在发动机运行的暂态阶段,研究发动机单缸进气量的变化是减小发动机尾气排放和提高燃油经济
目的探讨冠心病(CAD)患者血清脂蛋白相关磷脂酶A2(Lp-PLA2)、清蛋白(ALB)水平的变化及其与CAD的关系。方法分别检测71例急性冠状动脉综合征患者(ACS组)、65例稳定性心绞痛患
基于实际教学数据对教育评价效果进行科学的验证和反馈,对优化教育评价方法至关重要。以"基础会计"课程为例,选取大连民族大学2015-2017级经济学专业学生为研究对象,利用"蓝
研究了不同热处理制度对R60702工业纯锆管材力学性能和显微组织的影响。结果表明:工业纯锆管材热处理制度为600℃×60 min时能够得到优异的力学性能,抗拉强度为492.5 MPa,屈
目的探讨慢性乙型肝炎(CHB)患者血清α1微球蛋白(α1-MG)与乙型肝炎病毒DNA(HBV-DNA)载量的相关性。方法收集233例CHB患者血清。将CHB患者根据乙型肝炎病毒表面抗原(HBsAg)、