基于机器学习的网络流量分析系统的应用与研究

来源 :锦绣·下旬刊 | 被引量 : 0次 | 上传用户:wzsyxz
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
  摘要:随着网络带宽的快速增长和各种网络业务的广泛应用,网络流量的建模和预测变得越来越重要。为了更好地对网络流量进行建模和预测,本文一方面对现有的几种流量模型进行了总结和分析,分为短相关模型和长相关模型;另一方面分析了常用的流量预测方法,特别是神经网络、模糊理论和小波分析。在实际测量中,采用FIR神经网络模型对网絡流量进行预测。最后,展望了流量预测在网络安全领域的应用前景和发展方向。
  关键词:网络;流量分析;自相似性
  1 网络异常流量分析检测系统的设计与实现
  通过分析用户需求,可以知道异常流量分析与检测系统首先要具备的功能就是快速高效的检测出网络中的异常流量。它的核心模块就是检测模块,除此之外,它还应包括:流量采集,日常运维,故障管理等功能模块,如图 1 所示。其中,流量采集模块主要的功能是采集和存储网络中的数据流量,对流量数据进行预处理,使其能够在流量监测模块进行检测;流量监测模块则主要对网络中的流量进行检测,对于异常流量进行响应处理;日常运维模块则主要对网络设备状态进行监控,并对网络流量进行可视化监视,以及异常流量进行人工干预等;故障处理模块主要在网络中出现大量异常流量时进行快速响应处理,包括对异常流量的告警上报及阻断等措施。
  1.1网络流量预测方法
  用数学模型来描述网络流量, 虽然能对未来时刻的网络流量进行一定的预测, 但要更加灵活、高效地进行流量预测还需要人工智能等一些方法。同时, 网络流量行为随着时间和地域的不同会呈现出很大的变化,因此想提供一种针对网络流量的通用化预测是很困难的,理想的预测方式应该是自适应的而且一定要能够给用户提供足够的可信信息。在网络流量预测中,还存在着可预测性问题,即在一定的预测步长内的最小预测差以及在可接受的预测误差范围内最大的预测步长。
  1.2 流量感知模块
  在流量感知模块中,使用了 k-means 聚类的方法进行流量数据的聚类,使正常数据和异常数据尽量区分开。在模型训练部分,通过聚类算法将网络流量数据分成差异较大的数据簇,再将每个数据簇的中心点与训练数据库的正常流量数据进行距离运算,根据事先设定好的异常流量阈值判定该数据簇是否为异常流量数据簇,从而达到异常流量的检测目的。框架中,训练模型部分用于生成正常流量数据簇模型,将在线检测部分的不确定数据根据聚类结果来判别正常数据和异常数据,之后将确定为异常的流量数据送入异常流量数据集,改进实时监测模块的检测模型,在下一轮的数据检测时能够更好检测出异常行为。
  2 网络流量的实际测量和预测
  2.1 网络流量测量与数据的正规化
  为了对神经网络在网络流量预测中的效果进行分析, 我们首先进行了网络流量的实际测量。在我们的研究工作中,我们是在某大学校园网的中心交换机上进行流量测量的,流量统计的间隔时间为5min,所采用的是SNMP协议。由于是在大学的校园网上测量,星期一至星期五网络活动较频繁,所测量到的数据变化范围较大, 最小值和最大值之间相差近3个数量级。
  2.2 网络流量的随机模拟
  用 Trous 算法对网络流量进行分解采用 Trous算法对实际测试到的网络流量时间序列进行分解.本文以 Berkeley 实验室 1994 年在广域网上监测到的数据作为原始网络流量 .从原始数据中取得 1 024 s 的样本数据( 包的统计时间尺度为1 s) , S k 进行尺度数为3 的变换(一般认为至多有 lgn 个不同尺度, 其中为序列长度)。
  3 流量预测结果
  我们进行网络流量实际预测时,具体做法是:选择某个星期二的一整天24,流量统计的间隔时间是5min,共288个数据。由于早上才上班,所以主要考虑8点(即第96个时刻)后的预测情况。使用式(1)对原始数据正规化后, 再对正规化数据进行训练, 对下周星期二的流量数据提前一步做预测。预测时采用边学习边预测的方式,滑动时间窗口为15,即每次预测前都学习前15个时刻的流量数据。我们主要考察FIR过滤器的阶取不同值时,对预测结果的影响。
  4 结束语
  随着互联网和物联网技术的发展,网络中异常流量的检测必然成为最主要的安全手段之一,如何面对大数据时代下的异常流量进行高效性的检测,是今后将长期研究的问题。本文通过提出一种将机器学习算法和网络流量分析技术相结合的方法,设计一套对网络异常流量。进行检测的系统框架,使其面对大数据流量时也能保持高效准确的检测,为网络异常流量检测问题提供了新的思路。
  参考文献
  [1]罗智慧.网络安全流量分析关键技术研究[J].网络安全技术与应用.2020(1):17-18.
  [2]Aimin Sang , San- Qi Li.A predictability analysis of network traffic[J].Computer Networks , 2002 ; 39 ( 4 ) : 329~345
  [3]A Adas.Traffic models in broadband networks[J].IEEE Communica-tions Magazine , 1997 ; 35 ( 7 ) : 82~8
  基金项目:2020年安徽省教育厅关高等学校省级质量工程项目,课程思政项目(编号:2020szsfkc1004);
  2020年校级质量工程线下课程(编号:szxy2020xxkc07);2020年宿州学院专创融合重点课程建设项目(编号:szxy2020zckc22);2020年校级质量工程项目(编号:szxy2020xnfz02).
其他文献
摘要:伴随着中国经济的迅速腾飞,人们对生活品质地追求也不断提高,全国人民出行旅游数据年年攀升。根据经济文化和旅游部门的大数据测算,2021年“五一”假期间,全国国内出游旅行高达2.3亿人次,同比增长达119.7%,国内旅游收入共计1132.3亿人民币,同比增长达138.1%。以上数据表明,当今的旅游业的发展已经离不开“大数据”技术的支撑。  关键词:大数据;高职院校;旅游管理;人才培养  一、“大
期刊
摘要:在数字时代中,互联网和移动应用的改变了人们的生活方式,也对消费者的消费行为模式影响深远。通过数字营销,提升互联网时代下的营销价值,拓展传统营销应用和实践空间,不仅可以为企业找到更广阔的发展空间,数字营销的更广泛应用为企业的“互联网+”时代下的发展规划和应用提供理论依据和操作指导。如何在保持传统商业优势的基础上拥抱数字技术,提升数字营销的应用价值应当成为我们必须面对的问题。基于此,本文将重点进
期刊
摘要:本文以高职院校高层次人才中的非党员教职工作为研究对象,客观分析目前高职院校高层次人才发展党员工作中存在的问题及其成因,结合高职院校高层次人才的特点,探讨党委—党总支—党支部层层联动机制,构建党员领导干部—普通党员—群众多方面影响机制,逐渐形成思想上、工作上、生活上多维度关心机制。  关键词:高职院校;高层次人才;发展党员;机制  2012年8月6日,中央办公厅印发《关于进一步加强党管人才工作
期刊
摘要:在我国目前得出学前教育教学领域中开展儿童发展心理学教学是新时期高职教育发展的必然趋势。目前,我国高等教育面临着顶层设计不成熟、理论课程不完善的困境。本专业课程具有较强的专业背景和行业背景,本文主要针对对学前儿童发展心理学课程教学改革模式进行分析,以期可以优化教学模式。  关键词:高职;学前儿童;心理学;教学改革  引言  幼儿教师要根据不同年龄儿童身心发展的特点和规律,以提升儿童全面发展的策
期刊
摘要:现阶段,随着科学技术水平的不断提升,以及新课改教学任务的不断深入,创新教学理念,调整教学结构成为我国各阶段教育工作者必须要推进的一项任务。中职院校作为培养人才的主要摇篮,在这一任务中应首当其冲,发挥自身作用,调整人才培养方向,促进人才综合发展。本文立足于中职数学教学,对如何在教学中整合信息技术,提升教学效率,促使学生综合发展展开分析,旨在为相关岗位的工作者提供合理建议。  关键词:中职数学;
期刊
摘要:随着计算机深入到日常生活的各个方面,计算机软件与硬件也实现了飞速发展。与此同时,大量的计算机系统安问题也迅速凸显出来,为了全面提高计算机系统的安全稳定性,做好系统安全维护工作显得尤为重要。本文分析了计算机系统的安全维护类型,并提出了计算机系统的安全维护策略。  关键词:计算机系统;系统维护;维护类型;维护策略  一、计算机系统的安全维护类型  1、系统可预见性维护,可预见防性维护主要针对计算
期刊
摘要:我国在近年来的生物制药技术的发展速度已经非常迅速,随着我国科学技术水平的不断提升,例如细胞工程技术、基因工程技术等多项先进技术已经在生物制药技术中得到了广泛的应用,并且给现代生物制药技术的生产质量及效率带来了质的飞跃。由于目前我国的制药工业中大多数都是采用生物制药,因此生物制药技术的优劣直接关系着我国制药行业的发展,本文基于此,对现代生物制药技术的发展现状及未来发展趋势进行简要分析。  关键
期刊
摘要:气候变化通过对区域稳定性产生影响,进而改变国家的脆弱性,当它与薄弱的政府治理和社会分裂相结合时,可以引发一系列的暴力恶性事件,通常沿着潜在的民族和政治分歧发展。因此,研究气候变化对区域稳定性的影响势在必行。首先根据建立的模糊综合评价模型分析了气候对国家脆弱性的影响,然后利用相关性分析了气候如何对国家脆弱性产生影响。  关键词:模糊综合评价;国家脆弱性;气候变化  1 模糊综合评价模型的建立 
期刊
摘要:高职院校属于技能型人才培育基地,在新时代背景下,为确保高职学生健康发展,需要加强其技能、思想、素质综合培养。通过应用影视艺术育人方式能够有效提升学生综合素质。但是就现阶段实际情况进行分析,多数高职院校相关工作开展差强人意,因此,需要积极了解影视艺术育人效果。  关键词:非艺术类;高职院校;影视艺术;培养育人  本文以影视艺术在非艺术类高职院校中的育人功能为题,首先简要叙述影视艺术教育以及重要
期刊
摘要:软件设计主要由UI设计与编码设计构成。UI设计是一种用户界面设计,移动UI设计主要关注移动终端的用户界面设计,如手机、平板电脑,以及各类手持终端设备等。本文选取移动UI设计中的图标应用分析作为研究题目,概述了图标分类。并以此为基础,分别从图标设计原则、步骤、技巧等方面,对其应用进行了讨论。  关键词:移动UI设计;图标;应用分析  在移动端的UI设计中,根据图标在应用程序中的使用属性,通常被
期刊