三种类型试验数据预处理方法研究

来源 :南昌大学 | 被引量 : 0次 | 上传用户:gyquan
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着科学技术和经济水平的不断发展,大量的试验数据会被利用,但由于获取的是不同环境、不同时间、不同状态的试验数据,所以这些数据不能直接拿来使用,必须先对试验数据进行预处理,因此试验数据预处理方法研究是非常有意义的。本文针对时间序列试验数据、小子样试验数据、非时间序列试验数据这三类试验数据进行预处理方法研究,其中重点研究异常数据剔除方法、聚类分析以及离群点检测,并且通过相应的实例分析所提出算法的性能。对于时间序列试验数据,本文通过构造初始拟合数据,利用B样条曲线的方法构造递推模型,使用基于样条平滑方法估计的判断门限对双向检验的结果数据是否异常值进行判定,并且拟合修复满足修复条件的异常数据点,当双向检验的结果不同时,通过构造内推模型来进一步检验。实例分析表明:本文提出的方法相对其它方法能更有效地剔除异常数据,通过数据分段处理能更有效地检验那些可能产生阶段性跳跃的数据,使得模型具有更好的稳定性、更广的适用性以及相对更高的异常数据剔除率,具有较高的实际应用价值,是一套切实可行的异常数据剔除与修复方法。针对非时间序列试验数据,本文首先介绍了两种聚类算法的改进过程,并分别在实验数据集上测试算法的聚类效果并与其它算法进行对比分析,然后对两种改进的聚类算法分别从算法复杂度、聚类评价指标值以及算法运行时间方面进行对比分析,最后在此基础上提出基于聚类的离群点检测算法框架,通过在ODDS数据集的表现来对比分析。对于小子样试验数据,本文使用极大似然估计法先对原始数据进行分布拟合优度检验,确定其最优分布,然后针对不同分布采取不同的异常点剔除准则。最后,通过实例来展示小子样数据的异常点检测过程。
其他文献
一、培养学生自学能力的途径和方法积极为学生创造自学条件。在物理课堂教学中,教师要善于为学生创造条件,使学生的自学能力得到锻炼提高,具体有:a.在教学方法选用上,要吸收
电子束熔丝沉积增材制造技术具有效率高、应用范围广、成形件性能好等优点,已经在航天航空、船舶、汽车、医疗等领域有了较大的利用价值。作为新兴成形技术,电子束熔丝沉积增
水生哺乳动物(主要是鲸类和鳍脚类)分布范围广、活动范围大、行为复杂,且在水下活动时间长,常规的目视观察受时间和空间限制,通常只能获取有限的信息.信标跟踪记录(Bio-loggi
大果水晶梨是韩国从水晶梨(新高芽变)园中选育的枝变品种。2001年我区果农从山东果树研究所引入苗木,经连续2年的结果观察表明:该品种是理想的晚熟砂梨新品种,该品种果实个大,单
应用青蛙红细胞微核试验和单细胞凝胶电泳试验研究了两种新型杀虫剂一吡虫啉和抑食肼对青蛙蝌蚪和成体的遗传毒性,结果表明:当吡虫啉为2mg/L时,蝌蚪红细胞微核率与对照组相比,无显
21世纪社会科学技术高速发展,人们称之为信息时代、多媒体时代。电脑多媒体教学,是课堂教学中一种崭新的教学模式,是辅助教学的一种手段。以计算机为教学媒体,是目前较先进的
研究了微囊藻毒素RR在大型沉水植物苦草根、叶组织中的积累作用,通过ELISA方法检测发现,苦草可以吸收MC-RR,其吸收具有时间和剂量效应,根的吸收作用强于叶。第7d叶对MC-RR的吸收
洛阳市汝阳、嵩县、新安等县的李园存在品种混杂、品质差、果个小、产量低、成熟上市期集中、经济效益低下等问题,急需更新一些老品种.为此,我们于1998~2001年进行了老李子园
近年来,随着化学农药的大量使用,农药对果品和环境的污染越来越严重.因此,解决病虫害的防治与减少农药污染的矛盾,成为十分紧迫的任务.本文着重分析了果树病虫害防治中的农药