全文索引技术中索引归并算法的研究与分析

被引量 : 0次 | 上传用户:hestry
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
索引的动态维护与更新是全文检索与全文索引技术中的一个重要研究和应用方向,当随着Internet的迅速发展,互联网上信息数据在急剧地增长,而在这种海量数据的情况下,新的数据在不断增长,同时过时的数据就要被淘汰,这就需要对信息数据频繁的插入和删除,因此,索引的动态维护中的归并算法的研究也就处于了一个十分重要的地位。本论文主要针对常见的索引归并算法进行改良,并对改良的算法在时间效率以及可行性上进行了研究论述。索引的过程就是把原始的数据处理成一个有利于高效检索的数据形式,因此索引的基本结构关系到动态索引维护与更新的效率,包括建立索引的过程,索引的组织方式,正排表,倒排文件及倒排索引的建立,本文介绍了构造倒排索引的过程,并分析静态索引技术的优缺点以及增量索引知识,还有索引动态更新对信息检索技术的重要性。本文比较了各种索引更新策略,包括原地更新策略,重建策略,重新归并更新策略,并且分析了这些策略的成本代价,在此基础上研究了基于归并策略的各种不同的索引归并算法,包括有立即归并算法,对数归并算法,几何划分归并算法,类哈夫曼索引归并算法,同时分析了他们的优缺点,提出了各自的改良算法,其中本文的重点是在详细分析几何划分归并算法的基础上,针对原有的几何归并算法在索引过程中没有对文档删除,提出了带有索引垃圾碎片的回收的新的几何归并算法,其中新算法采用了极限值的方法对删除的文档进行处理。最后通过一个开源的全文检索与全文索引平台测试了立即归并算法,对数归并算法及改进算法的索引合并过程和时间,验证了在相同条件下使用改进的算法进行合并,时间上得到了提高。测试了几何归并删除文档索引碎片回收的可行性。
其他文献
作为动词语义结构中一个非常独特的语义成分,预设在俄语动词多义形成过程中起着非常重要、有时甚至是不可或缺的作用。预设在俄语动词多义形成过程中所起的作用可归结为以下
铺网机是非织造布生产线的关键设备,直接影响产品的质量。随着非织造布行业的快速发展,传统的铺网机缺乏对纤维网铺放的控制,造成纤网均匀度差,边缘增重严重,产品质量不高,人
随着5G的商用,它所搭建的移动信息高速公路将使得与之相关的前沿技术的广泛运用成为现实,并在社会层面引发人与器物的万物皆媒、人与空间的泛在阅读、人与人的恒常在线,从而
目的探讨细节管理方法对预防神经内科重症患者院内感染的效果。方法将2012年1月~2012年12月江西省赣州市人民医院神经内科重症患者作为观察组,在常规临床护理管理方法基础上,
对认知心理学的知识分类学说理论进行了阐述,并结合初中英语教学现状进行分析,提出教师在初中英语学科教学实践中,要善于运用知识分类学说来解决学科教学中出现的问题的观点
近年来,随着南海问题的不断升温,中国在南海问题上的被动地位越来越凸显。东盟作为弱者的一种"反领导"策略导致了中国在南海政策上的被动。东盟的"反领导"策略建立在"友好弱
<正> 范小青从事小说创作已近十年了,但这十年的写作小史却未能给批评家们一个较易把握的相对整一的“风格作家”,也就是说,作为作家角色的“范小青”一直处在变化之中,她曾
验算并分析了电机振动产生的原因,通过电机的改造和试验,得出采用放大气隙等措施是解决电机振动的可行方案.
本文以企业的实际需求为出发点,以基于整车的自卸车举升机构优化设计平台为研究对象,对优化设计平台开发全过程进行了研究。此平台开发改善了企业对液压举升机构的设计手段和
管理层股权激励是现代公司的激励机制之一,实施管理层股权激励能够对企业管理层进行更为有效的长期激励,并降低管理的成本,为公司不断地吸引和稳定人才。但是这种激励机制在