不确定数据的世系管理和相似性查询

被引量 : 7次 | 上传用户:ArchrSaber
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
不确定性数据在很多应用中广泛出现,例如经济、军事、物流、金融、电信等,其表现形式多种多样,包括关系型数据、半结构化数据、图数据、流数据、移动对象数据以及无结构化的Web数据等。目前,根据应用的特点与数据形式的多样性,已经出现了多种不确定数据模型,这些模型的核心思想都源自可能世界模型。该模型从一个不确定的数据源演化出诸多确定性的可能世界实例,所有实例的概率之和等于1。尽管可以针对各个实例单独进行查询处理,合并中间结果并获取最终结果,但是可能世界实例的数量远大于不确定数据库的规模,从而导致可能世界模型在实践应用中并不可行。因此必须采用排序、剪枝等启发式技术进行优化处理以提高查询处理效率。针对不确定数据管理的挑战,本文主要考察不确定数据查询处理的优化。主要工作分为两部分:不确定数据世系管理和相似性查询。具体的,针对数据的不确定性,研究如何通过不确定数据的世系追踪数据不确定性的来源和大小,以及对不确定性集合数据进行相似度评价,最后提出了不确定数据流上ER-topk查询的精确算法。本文的主要贡献如下:●首先研究了如何利用数据世系追踪数据不确定性的来源和大小。基于PHP-tree数据结构,近似描述不确定数据的How世系,避免了追踪数据演化的中间结果,同时也避免了运用可能世界模型对不确定性数据进行建模;基于PHP-tree,可以追踪日标数据的不确定性来源,以及对目标数据的不确定性大小进行评价。·针对不确定集合,定义了不确定性集合的期望相似度算子,提出了不确定集合期望相似度的精确和近似算法。具体的,运用动态规划方法在多项式时间内给出不确定集合期望相似度的精确算法,而不必扩展可能世界实例;考虑到精确算法需要耗费大量的时间和空间,为克服可扩展性差的缺点,我们运用Monte-Carlo方法在线性时间内近似计算不确定集合的期望相似度。●考虑到不确定集合相似度的多样性,又评价了不确定性集合的概率阈值相似度。给出了不确定集合的概率阈值相似度算子的定义,以及精确和近似算法。运用动态规划方法在多项式时间内给出不确定集合概率阈值相似度的精确计算过程;同时考虑到概率阈值相似度的计算结果是一个概率值,当用户给定相似度的阈值,利用尾概率不等式提出了一个线性时间内的剪枝规则,大大加快了精确解的计算过程;考虑到没有被剪枝的不确定集合的精确算法需要耗费大量的时间和空间,我们运用Monte-Carlo方法近似计算不确定集合的概率阈值相似度。●基于界标模型提出了不确定数据流响应ER-topk查询的精确算法,该方案将所有不断到来的元组分成两组,一组包含ER-topk查询的候选结果,剩下的元组包含在另外一组中,我们分别用数据结构domGraph和probTree来维护这两类元组;基于期望的线性性,我们避免了扩展所有可能世界实例,在次线性时间内给出查询的结果。本文研究了不确定数据的查询处理,主要工作包括不确定数据世系管理和不确定数据的相似性查询,通过大量的实验验证了提出算法的效率和可扩展性等。
其他文献
‘政治发展”是自上世纪50年代开始兴起的一个研究领域,是目前各国政治学者都在关注的一个热门学术话题。马克思没有提到“政治发展”概念,并不代表他没有关于政治发展的思想
随着网络的日益普及,网络日渐成为一种新型传媒。网络舆论已经逐渐成为新闻舆论中一种重要的形态,对监督我国政府行为的作用日渐重要。对于发挥网络舆论对政府行为如何监督已
国有资产监督管理委员会(以下简称国资委)是我国经济转轨时期经营管理国有资产的专门机构。国资委从设立开始,一直兼任监管者和出资人的职能,其职能定位也一直是学界争论的焦
改革开放以来我国的国民经济出现了快速增长,全国的公路建设也随之迅速发展,与此同时带来了交通量大量增长、重载和偏载等问题,这些问题的出现给在役公路的路用性能和行车安全带
随着医药产业市场的发展,医药企业战略的研究对促进医药企业的发展,提高医药企业的竞争力,推动医药企业的经营管理水平上台阶,将起到积极的影响,具有深远的意义。本研究结合
随着装配式建筑在建筑行业的快速发展,现有设计方法在设计思路、流程、方法等方面存在一些问题,将BIM技术引入到装配式结构的设计过程中,可以有效解决传统装配式结构在设计过
隧道路段是高速公路的瓶颈路段,也往往成为高速公路事故黑点路段。隧道交通环境的特殊性使隧道交通事故与驾驶心理密切相关,分析隧道路段驾驶心理的变化过程和隧道环境对驾驶
<正> 一、病历摘要 患者于××,H22403,女,22岁,未婚,莱阳市人,汉族、营业员。因精神失常7年,又话多,疑人迫害月余,于1993年5月5日第3次住院。家族成员无精神病及癫痫史。患
国防教育是巩固国家安全的固有环节,高校国防教育在其中扮演了不可或缺的角色。随着时代的发展和变迁,国防教育的侧重点和方式正在转变,高校国防教育随之也发生了排序重点的
随着Web技术的发展及其广泛应用,Web上涌现了海量的、格式繁多的数据。对这些数据的查询和管理成为Web应用的重要步骤。其中,相似性查询作为人们获取信息的重要手段,是Web数