切换导航
文档转换
企业服务
Action
Another action
Something else here
Separated link
One more separated link
vip购买
不 限
期刊论文
硕博论文
会议论文
报 纸
英文论文
全文
主题
作者
摘要
关键词
搜索
您的位置
首页
期刊论文
大数据环境下一种高效的重复记录检测方法
大数据环境下一种高效的重复记录检测方法
来源 :洛阳师范学院学报 | 被引量 : 0次 | 上传用户:letter0110
【摘 要】
:
提出了一种基于同级属性的重复记录检测方法。首先给出了同级属性的判断方式,然后通过查找数据集中的同级属性,来缩减数据集中需要计算的属性个数,提升相似重复记录检测的效率。
【作 者】
:
殷秀叶
【机 构】
:
周口师范学院计算机科学与技术学院
【出 处】
:
洛阳师范学院学报
【发表日期】
:
2014年11期
【关键词】
:
大数据
相似重复记录
同级属性
big data
approximately duplicated records
sibling field
【基金项目】
:
国家自然科学基金青年项目(61103143),河南省教育厅科学技术研究重点项目(13A520105),周口师范学院青年科研基金项目(zknue0215)
下载到本地 , 更方便阅读
下载此文
赞助VIP
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
提出了一种基于同级属性的重复记录检测方法。首先给出了同级属性的判断方式,然后通过查找数据集中的同级属性,来缩减数据集中需要计算的属性个数,提升相似重复记录检测的效率。实验结果表明,受同级属性在数据集中所占比例的影响,该方法能够不同程度的提高相似重复记录检测的效率。
其他文献
PPP投资规模对地方财政收入的影响
本文构建2016~2019年山东省各地级市PPP投资规模、财政收入等相关经济指标面板数据,在进行F检验、LM检验和稳健的豪斯曼检验后,选用固定效应模型计算分析PPP项目投资规模对地
期刊
PPP投资规模
地方财政收入
固定效应模型
关于寒地水稻培育壮苗前期准备的探讨
对水稻种植来说,培育壮苗前期准备是十分重要的一个环节,它直接影响着水稻的产量和质量,也是水稻种植的基础。本文对寒地水稻的培育壮苗前期准备加以分析和探讨。
期刊
寒地水稻
培育壮苗前期准备
探讨
当代大学生价值观多元化研究现状的思考
随着经济全球化及信息一体化进程的加速,我国社会的文化环境呈现出多元文化并存的格局。成长于这一社会环境中的当代大学生,时刻感受着各种文化的影响,其价值观日益显示出多
期刊
大学生价值观
多元文化
研究现状
思考
The university students' values
Multicultural
Research act
家庭资本和阶层认同对创业的影响
本文采用2015年中国综合社会调查数据(CGSS2015),基于家庭资本和阶级认同两个方面,详细分析其对个体创业的影响.实证研究发现:个体所在家庭总收入与家庭房产数量与创业呈显著
期刊
家庭资本
社会阶层认同
创业
河南省政府数据开放思考
政府数据开放程度是推动数字经济发展和驱动传统产业转型升级的关键。本文通过分析河南省政府由信息共享走向数据开放的紧迫性,调研当前河南省政府数据开放存在的问题,提出加
期刊
政府数据开放
政策
信息公开
河南
春秋时期社会“失范”原因探析
春秋时期,周王室的衰微、诸侯争霸、大夫执政乃至"陪臣执国命"等因素,共同造成了中国古代社会典型的"失范"状态。周王室的衰微是其根源,私家的兴起只是加速器,而时人对周礼背后之
期刊
社会“失范”
“天下无道”
“礼坏乐崩”
礼义之丧
Social's Anomie
Moral chaos
Rites collapsed and musi
保险业改革推动广西农业发展研究
广西农业在广西生产总值中占有较高位置,但广西农业生产的抗灾性较差,生产机械化不足,农民收益较低。为此,广西保险业从农业保险的险种、保险政策、保险补贴以及“保险+期货
期刊
保险业改革
农业发展
农业保险
广西保险
从个体层面分析当前学术不端行为产生的根源——基于理性选择理论视角
学术不端现象已经涉及到了学术的各个方面,干扰了学术自由,制约了学术的创新发展。社会环境的改善和制度的完备从社会层面上固然可以有效减少这种现象的发生,但从个体层面上,
期刊
学术不端
个体层面
理性选择理论
收益
Academic misconduct
Individual level
Rational choice theor
其他学术论文