可逆Bloom Filter及其在长流识别应用中的研究

来源 :大连海事大学 | 被引量 : 2次 | 上传用户:dongfan1909
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
长流识别对流量工程、网络操作和网络管理都有着重要意义。大量的流测量的研究表明:在各种网络中,流的分布表现出明显的重尾特征,即大多数的流(短流)仅拥有少量的报文,而少数的流(长流)却拥有大量的报文。相较于流的总数,长流的个数非常少,但同时它们也占有着网络流量的大比例。了解了网络传输中长流的信息就能够很好地掌握此次通信行为。在这篇论文中,我们研究并改进可逆Bloom Filter,使它能够更好地应用到长流识别中。本文首先介绍了Bloom Filter及其变体在网络测量中的应用情况。然后重点说明可逆Bloom Filter,它也是由Bloom Filter变形得到的,是近几年新提出的一种网络测量技术。文中的可逆Bloom Filter包括8个哈希函数,它们选取源串的部分比特位作为哈希函数的哈希值。可逆Bloom Filter可以根据哈希函数的特性和流分布的重尾特征还原出长流完整流标识和长度信息。所以,可逆Bloom Filter识别长流不需要再为每个哈希表项维护流标识。此外,可逆Bloom Filter为每个哈希函数分配独立的存储空间,消除了哈希过程中的内部冲突。在流标识的还原过程中,还原算法只作用在那些超过阈值的哈希短串上,相较于所有短串这些短串的个数是很小的,所以极大地减少了计算量。本文使用从CERNET网络上收集的Traces进行离线模拟实验。实验结果表明,文中提出的可逆Bloom Filter的算法可以精确地获得长流的标识信息和长度信息。尽管学术界的努力使可逆Bloom Filter的研究和发展上都取得一定成果,但是可逆Bloom Filter仍然是网络测量中的一种较新的技术,还需要优化。本文的研究和改进使可逆Bloom Filter能够更有效地应用到长流识别中。
其他文献
随着互联网的飞速发展,流媒体服务已成为网络服务中最普及的应用之一。在提升流媒体服务性能及稳定性的同时,流媒体服务的安全性也受到了越来越多的关注。本文以流媒体服务是
随着科学技术的飞速发展,人类在认识世界、改造世界的科技活动中不断积累着丰富的科学数据。科学数据的急剧膨胀,信息量的极大丰富,导致用户无法从海量数据中准确及时地获取
句法分析一直是自然语言处理任务中的重要课题,它的主要目标是根据语言学知识制定的语法规则或者基于统计知识建立的模型,自动建立由基本句子单元之间的基本关系构成的一棵多
随着信息的高速发展和信息化的深入,越来越多的企业将业务转移到信息化平台上。工作流管理系统为业务的高效运转带来了巨大的提升,已成为企业未来发展必不可少的支撑要素。随
在电喷行业,良好的售后服务系统是产品具有竞争力的重要保证。目前,在国内电喷行业普遍存在售后服务管理不规范化,制约了公司售后服务的顺利开展。本文以电喷行业中有代表性
CAN总线体系结构只包括物理层和数据链路层,在实际应用中需要制定相应的应用层,CANopen协议就是CAN应用层协议标准之一,其诞生于欧洲,广泛应用在汽车电子、医疗设备和航空航天等
自2008年底以来,国际金融危机的加剧,许多工程项目在资金链,客户流等多方面面临了各种各样的问题,夭折、中断、失败的项目越来越多。因此,对工程项目进行有效地管理与评价,已
数据挖掘是致力于数据分析和理解、揭示数据内部蕴藏知识的技术,它成为未来信息技术应用的重要目标之一。经过十几年的努力,数据挖掘产生了许多新的概念和方法。特别是近几年
信息技术的发展造成了大量数字信息资源的积累,OAI-PMH作为解决大量数字信息资源互操作和共享的一个简单、灵活的协议越来越受到了人们的关注。而目前大多已实现的服务提供者
信息技术的迅猛发展和Internet 技术的广泛应用,大量的分布、异构的信息源应运而生。这些信息源种类繁多、表示和存储形式各异,难以共享,给信息的消费带来很大的困难。为了有效