分布式文件系统中新型元数据管理子系统的研究与实现

来源 :江苏大学 | 被引量 : 0次 | 上传用户:rowhwafo
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着云存储系统的快速发展,需要存储和管理的数据越来越多,这对作为云存储系统重要支撑之一的分布式文件系统提出了更高的要求;高效地管理元数据是提高分布式文件系统性能的重要手段,也是当前研究和开发中的热点问题。本文以分布式文件系统中的新型元数据管理子系统为研究对象,主要工作如下:   首先分析了分布式文件系统的结构、PCM等新型非易失存储器的特性以及对分布式文件系统的影响,针对分布式文件系统中元数据管理的要求和特性,设计了新型元数据管理子系统的结构,并进行了分析。   在分析分布式文件系统中现有元数据通信协议的基础上,提出了基于合并RPC的元数据通信协议,通过合并RPC操作,减少元数据的通信量,提高分布式文件系统的读写性能;从减少的RPC通信数量、适用的负载类型等方面进行了分析,并实现了原型系统,使用Filebench以及多种负载数据集进行了测试与分析,验证了使用基于合并RPC的元数据通信协议能稳定地提高分布式文件系统的读写性能。   分析了分布式文件系统中现有的元数据管理算法,引入PCM,设计了基于PCM的元数据管理机制,给出了元数据的管理策略、基于PCMB树的元数据查询算法和基于主动写回的元数据修改缓存管理算法;从管理元数据、查询元数据、修改元数据和适应性等方面进行了理论分析,实现了基于PCM的元数据管理机制的原型系统,分别在本地和分布式文件系统中构建了测试环境,使用通用测试工具和数据集进行了测试与分析,验证了基于PCM的元数据管理机制能稳定、有效的提高分布式文件系统的性能。
其他文献
随着物联网技术(TheInternetofthings)的高速发展,无线射频识别装置(WirelessRadioFrequencyIdentificationDevices)得到越来越多的应用,其相应的射频识别(Radiofrequencyide
图像拼接技术是图像处理技术中的重要研究领域,是结合计算机视觉与计算机图形学,以及图像处理和虚拟现实等领域的一个研究课题。现在的科学技术的发展迅速,图像拼接技术已经
随着计算机图形处理技术与硬件技术的快速发展,虚拟现实技术被广泛地应用于3D游戏、虚拟制造、虚拟仿真等领域。阴影作为虚拟现实的一种重要的表现方法,能够向观察者提供场景中
随着科学技术的发展,科技项目研究成果不断的涌现,对这些项目进行的科技评审,是否能合理规划科研资源变得越来越为人们所关注。科技评审工作的开展已逐步由原有的“计划审批”向“同行评议”的方法转变。评审工作的公平与公正也逐渐成为人们关注的热点。如何保证这些科研项目的评审能更加客观、公平、公正的进行,是科技评审研究中的重要课题。论文从科技评审的公平与公正出发,提出了科技评审的评分偏差模型,通过对评分偏差的计
软件定义无线网络(Software-Defined Wireless Networking,简称 SDWN)是一种新的无线网络架构,它将软件定义网络(Software-Defined Networking,简称SDN)的思想应用于无线网络
随着地震勘探技术正向多维、多参数、多分量、高分辨率方向发展,获取的地震勘探数据量也越来越大,这给存储器的存储容量、计算机的处理速度以及远程网络的传输带来了极大的压
经过对车载影音/导航综合系统在国内外行业以及高校的研究状态、技术特点进行分析,研究了基于嵌入式技术为核心的内嵌式车载影音/导航系统的构成、实现原理,结合项目实际需求对
传统的基于内容图像检索往往是提取图像的底层视觉纹理、颜色和形状等特征,然后利用特征距离评价并排序输出结果,然而,这种方法往往达不到人们的要求,存在人类与机器理解差异
众多公钥密码体制中,椭圆曲线密码(ECC, Elliptic Curve Cryptography)由于单比特安全性强,计算速度快,曲线资源丰富等优势,得到广大研究者的关注。作为ECC最核心最耗时的操
随着高校信息化建设的步伐,手工排课方式已经逐步被计算机自动排课所代替,本论文采用C#2003和MS SQLSERVE等软件为开发工具,通过对排课算法解决方案的论证,设计开发了高等院