Web数据集成中基于贝叶斯模型的真值发现研究

来源 :东北大学 | 被引量 : 1次 | 上传用户:gaga1235
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在Web数据集成中,常出现多个数据源对同一实体对象的描述存在冲突。解决冲突,发现真值有助于提高数据集成质量或构建高质量的知识库等。在单真值数据冲突中,已有方法存在数据源质量衡量指标不充分,以及无法处理复杂数据复制等局限性。对于多真值数据冲突,已有方法中一类属于有监督算法,人工代价较大;另一类采用概率图模型计算真值,如果模型中假设的隐藏变量所服从的分布与实际数据不吻合时,可能结果较差。因此,本文对单真值和多真值数据冲突进行了研究,主要内容包括以下三部分。第一部分,基于单质量指标的单真值发现。采用单质量指标准确度度量数据源质量,在准确度计算中同时考虑数据源自身提供的事实以及没有提供的相应冲突事实。此外,对于数据复制导致的真值误判问题,将提供每条事实的数据源集合看作一个整体,用数据源群组的联合准确度捕获数据源间的数据复制。基于贝叶斯模型,提出了处理单真值情况的基于单质量指标的真值发现算法。第二部分,基于多质量指标的单真值发现。采用多个质量指标(召回率和假真率)度量数据源质量,有效区分了假真和数据缺失,从而在假设数据源独立的情况下提出了更为精准的单真值发现算法。此外,用联合召回率和联合假真率处理数据源间的数据复制,提出了能处理复杂数据复制的单真值发现算法。第三部分,基于多质量指标的多真值发现。分析了多真值情况与单真值的不同,在实体范围内统计计算数据源的质量指标召回率和假真率,提出了一种新的无监督算法处理假设数据源独立情况下的真值发现。最后,通过大量真实数据集和人工数据集上的实验验证了本文多质量指标的有效性,并证明了本文提出的解决单真值数据冲突和多真值数据冲突的方法的有效性。
其他文献
铁道发电车中使用柴油发电机组向本节车厢和连挂车厢的负载供电;控制柜用于控制发电机组的起动运行和电能的配置管理。柴油发电机组是电能生产单元,也是被控对象;控制柜是控
群文阅读,即以学生为主体,围绕一个议题选择一组相关联的文章,展开立体式的自主阅读。初识、选文、构思、设计、执教各个环节构建了群文阅读的基本路径。通过群文阅读,能够全
期刊
山东地区的明清古琴文化遗存大致以济宁、济南、诸城三地较为丰富。明代济宁琴家张德润创作的琴曲《九还操》收录于清代重要琴谱《松风阁琴谱》中;《聊斋志异·局诈》篇与嘉
<正>法治政府是我国实行依法治国、建设社会主义法治国家的必然产物,是我国社会主义政治文明建设的重要内容。法治作为一种治国方略,其运行机制和价值目标主要是通过制定良好
会议
电力体制改革的深入开展逐渐打破了电力行业的垄断现象,电力企业之间竞争日益激烈。这种背景之下,供电企业逐渐转变传统经营模式,从传统的初级经营模式逐渐转向正规化、市场化。但是我国电力市场改革起步较晚,电力企业市场化营销还面临还多问题,这种大背景之下提出适合于供电企业市场经营模式成为亟待解决的问题。本文以茂名市电力市场作为研究对象,运用文献详述法、模型分析法、统计调查法及实证分析等方法,深入分析了茂名电
作为计算机视觉领域中重要的课题之一,视频中的人体行为识别得到了越来越多的关注。这一技术与人类的社会生活密切相关,其应用范围已经涵盖智能视频监控、人机交互、运动分析
就目前几种成熟的VOCs治理技术进行了探讨,比较了几种技术的优缺点。并根据某化工企业的具体情况,最终选定了催化氧化技术作为该厂废气的处理工艺。
选取现今保存完整的陕西省渭南市澄城县尧头窑村中国传统手工业——陶瓷生产过程为研究对象,通过对古籍文献梳理及实地考察研究,给出了生产工艺完整的固体资源循环方式及方法
在一部作品中,人物是作品的灵魂,角色塑造的好坏直接关系着整部作品的成败。本文试从莱哈尔轻歌剧《风流寡妇》中经典咏叹调《维莉亚之歌》入手,分析该咏叹调成功塑造和体现
目的:观察8-溴-7-甲氧基白杨素(Br MChR)诱导人小细胞肺癌(NCI-H446)细胞凋亡作用,并探讨其与Noxa/Mcl-1比值增高的关系。方法:以体外培养的NCI-H446细胞和正常小鼠肺上皮CHL