基于动态马尔科夫模型的时间序列异常检测研究

来源 :西安电子科技大学 | 被引量 : 0次 | 上传用户:chrisliuyaqin
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着科学技术的发展与人类社会的进步,不管是在科学领域还是在生活领域都积累了大量的数据,其中大部分数据都是时间序列数据。时间序列异常检测也越来越重要并广泛应用于各个领域,例如信用卡欺诈检测、医疗监控、网络安全入侵检测等。  本文首先简要阐述了时间序列异常检测技术的研究现状,根据时间序列异常检测技术的发展过程,对异常检测技术进行了分类,并分析了各自的优缺点。现有的异常检测方法中,基于预测的异常检测技术由于其异常检测范围广而备受研究者的追捧,其中马尔可夫链技术因其实现简单、参数少而被广泛接受。本文深入研究分析了传统的基于经典马尔科夫模型的异常检测技术和基于高阶马尔科夫模型的异常检测技术。针对基于经典的马尔可夫模型方法的短时记忆特性忽略了数据之间的相互关联性,同时基于高阶马尔可夫模型方法的长期记忆特性模糊了历史数据与当前测试数据之间的相关性,降低了模型的可靠性的问题。  本文在这两种方法的基础上提出了基于动态马尔科夫模型的时间序列异常检测方法。该方法通过滑动窗口对序列数据进行分割,依据滑动窗口中数据的取值范围使用等宽度区间分割方法定义数据的状态,使用Pearson相关性分析方法确定高阶马尔可夫模型的阶数并建立模型,从而达到平衡记忆长度的目的,并能跟上时间序列的波动趋势。此外,提出了一种异常替换策略来防止已检测出的异常对后续模型建立的影响,以保证异常检测能够连续进行。使用合成数据和真实数据来分析验证所提出方法的各项参数以及测试该检测方法的性能。实验表明本文提出的基于动态马尔科夫模型的异常检测方法提高了适应性和检测准确性,降低了异常检测的误判率,并且克服了传统基于马尔科夫模型异常检测方法无法检测带趋势的非平稳时间序列的局限。  最后将提出的方法扩展到多维时间序列异常检测领域,并做了初步探索研究,提出了基于SVD(Singular Value Decomposition)特征分解和动态马尔科夫模型的多维时间序列异常检测方法,实验表明了此方法具有很好的理论研究意义以及广阔的研究前景。
其他文献
随着生产技术和科学研究的不断发展,工业原材料或者产品中微量水分的含量常常会影响到工业生产过程的控制和产品质量,微量水分测定仪作为一种精密分析仪器广泛应用于石油化工,国防工业和质量技术监督等领域。在微量水分测定方法中,卡尔费休法是最为精确可靠的方法。我国已把卡尔费休法列入石油化工、表面活性计的基础标准[1]。目前最常用的两种卡尔费休水分测定方法为库伦法和容量法,这两种测量方法测量方式不同,各有优缺点
本文主要针对激光诱导含能薄膜等离子体特性在激光驱动飞片技术中的作用探索,研究TiO_2-Al、MnO_2-Al复合薄膜调制周期、激光脉冲能量和延迟时间对激光诱导TiO_2-Al和MnO_2-Al复合薄膜等离子体特性的影响。并对比研究激光脉冲能量、复合薄膜调制周期对TiO_2-Al-Al_2O_3-Al复合飞片和MnO_2-Al-Al_2O_3-Al复合飞片飞片速度的影响。本文使用真空磁控溅射技术制
相位噪声是衡量电子设备性能的重要指标之一,精度高、易实现的相位噪声测量方法一直是电子测量领域研究的热点问题。混频器广泛应用于微波射频系统中,其相位噪声与系统性能息息
碱金属原子气室是原子陀螺、原子磁力仪和原子钟等量子仪表的核心部件,高性能微小型原子气室是制约上述量子仪表性能的重要因素之一.从理论基础、制造工艺和材料等方面回顾了
现如今,各种低功耗电子设备和器件主要采用传统电池进行供电,但随着电子器件体积的减小、使用数量的增加,频繁的更换大量的电池会产生诸多不便。加之,电池存在体积大难以集成,废弃
学位
结构光三维检测技术是测量物体表面轮廓最普遍的方法之一,由于该方法具有大量程、非接触、速度快、测量精度适中、光条图像信息易于提取等优点,在工业检测中得到了广泛应用。
水面舰船生命力主要由隐蔽性、抗损性和自行修复性三部分构成。对水面舰船而言,隐蔽性的改善难以有大的提升,自行修复性在舰船受损后才起作用。因此,通过采用轻量化防护材料