【摘 要】
:
随着社交网络的发展,个人电子数据呈爆炸性增长趋势,传统的集中式数据存储模式已经无法满足其存储和使用需求。本文针对个人电子数据的特点,提出了基于云环境的通用存储模式,
论文部分内容阅读
随着社交网络的发展,个人电子数据呈爆炸性增长趋势,传统的集中式数据存储模式已经无法满足其存储和使用需求。本文针对个人电子数据的特点,提出了基于云环境的通用存储模式,通过设计索引,可以提供多种快速查询功能。本系统能够有效的管理日益复杂的个人电子数据,满足用户对于存储能力、数据可用性和资源共享的需求。云计算目前已经成为学术界的研究热点。而基于云概念的存储系统,也已经初见端倪。云存储强调透明性,是以集群的方式对外提供海量的数据存储能力,通过增加存储节点,可以扩展存储容量,而数据的冗余备份,则可以保证容错性能。另外,分布式的数据存储,可以支持并行化数据管理,从而提高了数据存取性能。本文针对日益增长的海量个人电子数据,结合分布式云存储技术,设计并实现了个人电子数据的云存储系统。针对个人电子数据文件大小异构的特点,本文设计了通用的个人电子数据存储模型,即利用Hadoop分布式文件系统(HDFS)直接存放视频等大数据文件,而相对较小的文件,利用HBase直接存放。该模型能根据数据的不同类别,如图片、文档、视频进行分区存储。针对视频文件,本文设计了名称索引和主题索引,能够支持两种情况下的快速检索。针对个人电子数据中文档数据内容杂乱而用户又需要按内容检索的特点,本文利用MapReduce框架编程,建立Lucene倒排索引,实现了分布式索引的构建与维护。在此基础上,本文利用分布式检索工具Katta对分布式索引进行检索,实现了对海量数据信息的高效获取。此外,本文利用HDFS和HBase提供给用户的操作接口,对分布式系统上的数据实现上传、下载、删除等功能。
其他文献
文章分析了危险品道路运输安全管理存在的主要问题,识别了危险品道路运输安全风险因素,采用层次分析法确定了影响安全风险的主要因素,并针对主要因素建立了基于物联网技术的
作为我国文化建设中的重要组成部分,博物馆藏有大量的二维平面(大图像)展品,这些展品蕴含丰富的文化信息。如何对这些丰富的文化信息进行个性化自助导览是当前博物馆数字化陈
公司创业越来越多地被认为是企业在动荡不确定的环境下取得持续竞争优势的源泉。目前,公司创业理论已经成为战略管理研究和创业学研究的前沿课题之一,也是公司实践中的热点话
采用灰色关联度分析法和DTOPSIS法对烤烟引进新品种进行了多性状的综合评判,研究结果表明:两种分析方法都能较全面的评判品种,但两种综合评价方法的评判结果存在一定的差异。在
目的调查江西省上饶市乡镇卫生院和社区卫生服务中心人力资源状况,为基层卫生人才队伍建设,尤其是全科医学人才建设提供基础性资料。方法 2017年9月采用普查方法,对上饶市237
西方绘画在中国的传播,经历了一个特殊而漫长的过程。早在明代后期,便有少量传教士将西画带入了我国,但没有产生多大影响。鸦片战争以后,清王朝长久闭关的国门被迫打开,西方文化也
获得持续的竞争优势,是每个企业的追求,也是每个企业提高企业绩效的前提。在当前的超竞争环境下,传统的核心能力不再能为企业带来长期的持续竞争力,甚至会造成核心刚性。动态
【目的】综合评价国家甘蔗品种区试参试品系,筛选优良品系,为其在生产上的应用和推广提供参考。【方法】在云南瑞丽蔗区的湿润气候生态条件下,采用DTOPSIS法对国家第八轮甘蔗
融资租赁项目风险管理是融资租赁公司经营中的核心内容之一。融资租赁的兼具金融和产业特征的业务特点决定了融资租赁项目的风险分布于项目实施的全过程。对于融资租赁企业来
综合评判在农作物育种、农业生产决策、农产品品质评价等农业工程多领域的作用越来越显著,日益成为研究热点。该文概述了作物育种过程中几种主要的评判方法,包括模糊综合评判