并行数据挖掘技术在电信网管告警中的应用研究

来源 :长春工业大学 | 被引量 : 0次 | 上传用户:adsghah
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着电信网络技术的持续发展,电信网络资源产生异构性和动态性,导致网络管理系统中的功能越来越精细和复杂。电信网络系统中会实时生成海量告警数据,通常对告警的梳理方法是管理系统监测到某个故障引发告警,把告警的信息呈现给网管人员。由于一个故障的产生可以导致不同的设备产生不同的多个告警,然而并不是每个产生告警的信息都可以描述故障根本原因,给告警管理系统中准确定位产生的故障带来挑战。传统的网络管理系统和网管人员对产生故障诊断、定位和恢复,仅仅根据自己的经验和系统中有限的功能。随着电信网络的规模不断扩大和演变,个人的知识和经验已经无法满足电信网管告警处理的需求。数据挖掘为电信网络告警分析提供了新的方法,在电信网络向集群架构发展的情况下,基于Hadoop的MapReduce模型实现数据挖掘算法的并行化进一步优化了海量告警数据分析的性能。本文首先对电信网络系统中故障告警相关性概述;介绍了电信网络故障与告警的概念;研究告警相关性分析的方法;探讨了数据挖掘算法在网络系统中的具体应用。其次对Hadoop平台概述;研究和分析了MapReduce编程模型的架构和运行流程;详细论述了Apriori算法及其在Hadoop平台的并行化,提出了可变多阶段并行算法VMSPA,根据相邻两次迭代过程中产生的频繁项集的数量对比动态切换简单并行Apriori算法和VMSPA算法的应用,在VMSPA算法中动态更新同时产生的候选项集的数量来避免频繁扫描事务数据库,从而提高了算法的性能。最后将可变多阶段并行算法应用于电信网管告警相关性分析中。经过对算法的性能进行实验分析验证了算法的有效性,通过在告警相关性分析中的应用验证了算法具有一定的实用价值。
其他文献
<正> 在光学零件生产中广泛利用氟化镁单层增透膜。为了保证膜层强度,镀膜零件必须加热到300℃。镀膜所有工序中,占时间最长是加热到300℃,并在此温度下保温一段时间,随后冷
数学是一门严密、精确的科学,因此,数学语言表达必须严谨、科学。切忌辞不达意、是似而非、含混不清、产生歧义的表述。在教学中师生都必须用规范的数学语言,这是学习数学的
近年来,机电一体化系统发展十分迅速,这主要得益于控制技术、微电子及传感器技术的发展,且随着机电一体化的发展,机械动力性能提升十分显著,其稳定性、质量、可靠性均有显著
采用问卷法考察同性恋男大学生的自我接纳和幸福感,以及压力知觉、歧视知觉和社会支持对自我接纳和幸福感的影响。结果表明:同性恋男生的生活满意度、积极情绪和主观社会支持
目的:观察热哮方对哮喘GINA方案轻、中度持续期的干预作用。方法:将患儿分为3组,分别给予热哮方、辅舒酮、热哮方+辅舒酮治疗,共4周。结果:3组治疗后比治疗前各项指标均好转
智能家居的目标是用多种方法和设备来提高人们的生活质量,使家庭变得更舒适、安全有效。本文介绍了一种集激光光敏、温控、遥控、红外发射与接收等技术于一体的综合性的智能
十九大报告中提到:"加快建设制造强国,推动互联网、大数据、人工智能和实体经济深度融合,提高人力资本服务等领域培育新增长点、形成新动能。"据《吉林省2016年国民经济和社