一种基于云的分级存储系统的研究与设计

来源 :北京邮电大学 | 被引量 : 0次 | 上传用户:mm74481
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着整个社会信息量爆炸性的增长,无论企业还是个人对存储的需求也越来越高,网络存储技术也得到了越来越广泛的应用。随着网络存储技术的长足的发展,人们提出了分级存储管理技术(HSM,hierarchical storage management)的概念,HSM通过将多种存储介质组合成一种多级缓存结构,来提高系统的整体性价比,提供高效,安全的存储环境。传统的HSM系统通常使用如磁带库等大容量,低速的存储设备作为离线存储设备(即保存价值最低的文件的存储介质)。这样做要求HSM的管理者需要对数据中心提供大量的物理空间,制冷降噪设备,防尘设备,后备电源等硬件上的支持。   本文对分级存储系统的结构进行了研究,提出了一种基于云存储的分级存储结构CBFIS(Cloud-based Hierarchical storage System)。与传统的基于磁带库等设备的分级存储系统相比,基于云的分级存储系统不必为离线存储设备提供专用的数据中心,有着成本低,扩展性好,实现便捷等优点。本文就基于云的分级存储系统的文件迁移策略,数据价值估计算法,重复数据删除策略等方面进行了研究,分析了CBHS系统需求和已有的算法,结合具体的应用环境进行了设计,实验,并给出了实验结果。实验结果显示,CBHS的模型读写性能接近于本地磁盘,性能稳定,存储安全,是一种可行的分级存储系统模型。   同时,本文根据分级存储系统在容灾备份方面的应用,结合了CDP(Continuous Data Protection)技术实现了一种文件在线实时备份系统。此系统可以在用户对指定监控目录下的文件进行修改时,将文件实时的发送到服务器端,再由服务器端发送到CBHS系统进行存储。这样做使文件的存储安全性得到了很大的保障,同时,此系统提供的多版本备份技术也使得用户能够更加方便的管理文件。本文中详细给出了此文件实时备份系统的系统架构和具体功能,说明了系统的模块结构和具体的实现技术,最后为每个模块分别提供了测试报告。测试结果显示,此文件在线实时备份系统稳定,高效,可以为用户提供可靠的文件持续保护功能。   本文给出的分级存储系统和文件备份系统有着实用性高,成本低的特点,为中小型企业,科研机构甚至个人用户使用网络存储技术进行文件存储提供了思路。
其他文献
随着信息科学的发展以及信息化应用的普及,各行各业产生了很多的数据,再随着时间的积累,这些数据变得海量。在这些海量的数据中,必然会存在一些有用的、帮助决策的知识,这就需要我
随着Internet的迅猛发展,尤其是Web的全球普及,大大丰富了Web上信息量。通过对Web的挖掘,可以从Web页面中提取所需的知识;对总的用户访问行为、频度、内容进行分析,可以得到关
随着计算机网络的迅速发展,我们正处于一个知识爆炸的时代,在这个时代,人们不只是简单地对知识进行获取和保存,而是要从已有的知识中挖掘出自己想要的。可视化技术是用图形图
随着对文献数据研究的不断深入和研究方式的不断扩展,传统的文献计量学分析着重于数据的量化指标的分析方式已远不能满足对文献数据挖掘的需求。构建各种类型的社会网络,从中透
随着IMS(IP Multimedia Subsystem,IP多媒体子系统)业务的蓬勃发展,新业务的不断推出,给电信业务的持续发展带来了更多新的机遇,得到了众多电信运营商的追捧。但是下一代IP(Inter
随着互联网的普及,对于需要管理用户信息和保密数据的企业或者组织而言,有效的隐私保护手段越来越受到重视。目前,隐私保护的实施方向主要集中在三个方面:司法机构立法以及权威机
在数量庞大,随机分布的无线传感器网络(WSN)中,面对复杂的种类繁多的应用,单个无线传感器节点的能力十分有限,很多情况下不足以承担一项任务,所以多个传感器节点之间以某种方式协
近年来,随着网络科学的兴起,基于网络和图挖掘的分析方法受到了越来越多的关注,并被广泛应用到生物、政治经济、电信、工程开发和社会生活的各个领域。数据挖掘和社会网络分析领
近年国内冰灾、地震、泥石流等自然灾害频发,给人民财产和生命安全带来极大损失。在这些自然灾害发生时,往往伴随着灾区通信网络瘫痪,通信瘫痪极大的影响外界救援和受灾群众
随着视频编解码技术的飞速发展,视频解码运算的高复杂度对于处理器的计算能力提出了重大挑战。以H.264标准为例,高压缩率使其解码器的计算复杂度比MPEG-2标准提高了近3倍。视