基于倒排索引的全文检索技术研究

被引量 : 0次 | 上传用户:tinavalwell
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
倒排索引是提高全文检索效率的重要技术,而倒排索引的空间效率、动态性能、创建效率和检索效率一直是倒排索引面临的关键问题,它们之间既紧密联系又相互制约。课题正是围绕倒排索引的压缩、增量更新、填充及检索效率展开,其目的是提高四者的综合性能。压缩倒排索引有助于提高查询的吞吐量,因为读和解压已压缩的倒排索引往往比读一个未压缩的倒排索引要快。前人的研究关注得更多的是倒排索引的压缩率,而往往忽略了动态性。为了兼顾动态性,需要研究既能提高压缩率又能方便索引动态更新的压缩方法。在分析倒排列表的动态特点的基础上,得出构成倒排列表的文档编号、单词在文档中的出现频率及相应位置三序列的动态性是不同的,并由此提出一种混合编码的方法。试验表明,混合编码在压缩率方面优于其他支持动态更新的编码。为了支持倒排索引增量更新,从改进倒排索引的数据结构入手,提出了基于可扩展散列表的倒排索引存储策略。这一策略使倒排索引具有良好的可扩展性,不但减少了动态调整时的移动开销,而且调整后的索引对倒排索引的查询速度影响较小。它既支持文档的插入、删除操作,又具有较高的查询效率和空间利用率。词库的查找速度是影响倒排索引的填充及检索效率的因素之一。采用有序保留最小完全散列函数实现词库的查找,不但能加快查找速度,而且无需预先对单词排序。试验证明,它能获得比折半查找快近一倍的速度。
其他文献
朱利尤斯·凯撒是古代罗马著名的政治家、军事家;他的两部传世之作《高卢战记》和《内战记》详尽记载了他本人在共和末期所经历的主要政治军事事件,具有较高的史料价值,因而后人
随着计算机生成操作票系统在电力系统应用的逐渐推广,人们对其性能提出了更高的要求。国内餐的相关科研人员为此进行了不懈的努力,先后开发出了多种类型的操作票生成系统。从早
<正> 选拔官吏,是我国古代政治制度中的一项重要内容。它关系到统治机器的正常运转,因此为历代统治者所重视。纵观中国古代选官制度的发展,可以划分为三个阶段。第一阶段即夏
车载导航系统结合了导航定位技术、地理信息系统(GIS)、通讯技术以及嵌入式计算机技术,为用户提供导航定位、地理信息等服务。本论文首先讨论了车载导航系统的原理和硬件结构,
研究了骨架镍论剂的制备方法与活化条件,以及反应温度,压力,接触时间等因素对转化率的影响。提出了骨架镍催化剂的反应特性和用于木糖加氢的最适工艺条件。
某石油化工码头钢结构管廊,因横跨码头引桥道路,采用大跨度钢桁架结构形式。从管廊的结构设计、节点设计等方面对其进行分析,根据分析结果,总结了钢结构管廊设计中需要注意和
自尊是指个体在社会比较过程中所获得的有关自我价值的积极的评价与体验。近年来,关于儿童自尊发展及其相关课题的研究已成为教育与发展心理学界倍受关注的研究领域。在其定
公安决策是公安机关为履行其职能,针对预期目标所进行的方案设计、选择和实施活动的过程。目 前,我国公安机关决策存在一定的滞后性。发扬民主,充分调动决策参与者的积极
岩土动剪切模量和阻尼是岩土动力学特性中的两个重要参数,国内外许多学者进行了较广泛的研究,并取得了许多有价值的研究成果,但无论是理论上的认识还是工程上的应用方面都有待提
我国上市公司委托理财早在1993年就已出现。近年来表现得相当突出和普遍,实践中产生了一系列问题和矛盾,在很大程度上对这些公司的业绩、声誉及诚信以及整个证券市场产生了负面