警惕数据中心网络流量剧增

来源 :计算机世界 | 被引量 : 0次 | 上传用户:songpingqing
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
  服务器和存储的虚拟化被广泛应用于今天的数据中心,为我们带来了更加灵活、高效、高可用的IT计算环境。但当众多的虚拟机在同一时刻承载大规模网络流量时,数据中心就会出现流量剧增(或峰值冲击)现象。
  
  虚拟化带来流量变化
  
  过去,由于物理服务器的利用率一般仅有10%~20%,因此,数据中心不曾出现网络流量剧增(或峰值冲击)现象。但随着虚拟化和云计算的应用,服务器的利用率可达50%~60%,且占用空间更少、集成度更高。因此,数据中心网络流量开始发生变化。
  IDC 2010年全球服务器市场预测报告指出,目前虚拟服务器的增长率远远超过了物理服务器。一个拥有20台服务器的机架过去仅能支持20个应用,而现在每个虚拟服务器能支持4~10个应用,所以,现在一个机架就能实现对200个应用的支持。
  当使用旧服务器时,一个机架上仅运行几十个应用程序就会导致网络流量剧增(峰值冲击)的发生,我们称之为“网络巨浪”。但如果采用较新的高密度服务器,一个机架内运行的应用程序在达到200多个时会造成流量容量的不匹配。当其中某个应用程序的绑定数据丢失后,这时需要重新进行数据传输,这就会在网络上产生更大的流量,这些流量可能会影响到其他应用程序。
  与正常流量剧增状况相比,虽然这种重大的流量剧增(或峰值冲击)事件发生频率较低,但它们确实存在,而且出现时毫无征兆。正是由于导致这种状况的因素非常复杂,才使流量剧增变得不可预期。
  云计算趋势正在推动网络流量模型不断发生变化,使应用程序越来越向少数几个数据中心集中,托管和门户公司正在管理庞大的数据中心,并提供过去由企业内部IT部门负责提供的计算服务。此外,企业内部IT部门也在发生转变,所拥有的数据中心规模有所扩大,企业内部IT部门越来越趋向集中化。伴随着少量大型数据中心的出现,网络正在承载越来越多的流量。由于虚拟化与云计算的迅速普及正改变着网络流量模型,IT部门管理者需要对其数据中心网络进行重新构建。
  
  积极防范有新招
  
  对于以上现象,数据中心如不积极采取预防性措施,可能会导致灾难性后果。流量突增(或峰值冲击)可能会持续数秒甚至是一两分钟,这会导致系统中断,其所产生的影响会以梯级状态呈现,并且可能会持续数小时。
  目前,支持虚拟化数据中心的网络所经历的流量模型不同于以往。随着应用程序的增多,产生的网络流量也在增长,这种变化不仅仅是量的变化,并且流量的模型也有所不同。虽然不断增多的应用程序产生的流量不断增加,但是流量聚合的结果可能是流量波峰/波谷出现频率的降低,这是因为每个应用所产生的波峰与波谷会相互影响或抵消。然而,当多数应用在同一时刻产生突发网络流量时,大规模的流量突增(或峰值冲击)将会发生。此类大规模的流量冲击需要更高的服务器密度,并且可能会导致丢包现象,进而导致网络性能低下。
  对于传统网络流量而言,丢失的数据包仅需简单地重新传输,只是网络运行速度会变慢。但对于存储网络而言,就拿iSCSI来说,数据包丢失后需要被重新传输的可能是含有大量数据的数据段,重新发送会增加网络的承载压力。随着服务器网络与存储网络流量融合趋势不断加强,iSCSI和光纤通道(FC)协议被广泛采用,这使预防数据丢包正变得至关重要。不幸的是,大部分现有的完整标准,如数据中心桥接,都是针对10G以太网的,而大部分的数据中心无论是服务器还是网络都依然运行在1G以太网上(尽管拥有多个1G的链接)。
  当高度虚拟化的数据中心开始出现流量剧增迹象时,IT管理人员必须关注交换架构,以确保该架构能够胜任重大流量剧增的处理工作。不过,要设计出大规模流量冲击的临界点模型是需要付出昂贵代价的。
  幸运的是,到目前为止,不可预测的高流量冲击频发的时代还尚未真正到来。目前,最具成本效益的方式是利用交换机来实现更多的缓存,以应对流量剧增问题。
  一个典型的数据中心柜顶式(Top-of-Rack)交换机具有8MB~16MB的缓冲容量,如果超越了这个范围,将会发生数据包丢失现象。避免数据包丢失的传统方法有:
  (1)寻找多种方式通过“操纵流量阀门”来控制流量,即通过辨别这些“破坏性”的应用程序,并“驯服”它们,或将这些应用转移到一个独立的网络/机架上;
  (2)为问题网络配置更多的带宽,例如新增一个1G接口或把整个基础架构升级到10G;
  (3)采用Cadillac方法,部署整合网络适配器和FCoE等功能的10G网络基础架构。
  现在最新的、具有突破性意义的交换机已经面世了,它能够提供无阻塞的线速性能以及数千兆的缓存容量。每个端口会被配置特定的缓存容量,运行中如果超出该缓存容量值时,该端口会根据必要程度动态调用庞大的容量池内存库,从而最终确保缓存容量是可自我调节的,流量剧增只会简单地带来对更大的缓存容量池的调用。由于这种新型交换机可以提供1G的无阻塞线速性能,IT管理人员无需过早地将其基础设施升级到10G,以保护数据中心投资。
  IT管理人员应该有计划地淘汰那些老旧的无法有效应对流量突增的交换机,并部署具有充足的、可动态调整缓存容量的交换机,以应对来自服务器与存储架构的任何需求。
其他文献
@环球企业家杂志:【虚假点评 每条10元】点评网站上的商家好评有多少是“水军”作品?据北京商报报道,“水军”公司在幕后操纵着大众点评网上的商家信誉,其手法是邀请网站星级会员撰写虚假点评,并支付每条10元的价格。换个角度,虚假差评也可以成为打击商家的手段,日前某婚庆公司就因一条评价而将大众点评网诉上法庭。  @璇言璇语阅世间: 虚假无处不在,在大众、在淘宝、在百度知道、在问问、在搜搜、在sina、在
@计算机世界:2011年 8月19日是一万多名思科员工离开公司的最后期限。这只曾在两年内进行了145次疯狂收购的大鳄不再专注,现在明显胃动力不足、消化不良。大规模的裁员计划是对思科精力涣散的集中式打击。从许多年前中国企业的榜样到今天成为中国企业的前车之鉴,思科的发展史值得咱们本土企业认真思考。  @ 袍哥无敌:Cisco,曾经多少人膜拜!30年河东,30年河西!居安思危,继续前行!  @计算机世界
本报讯 日前,摩托罗拉开发者峰会(MOTODEV)在北京举行。此次峰会以“Android平台研讨会”为核心,摩托罗拉公司副总裁兼移动终端亚洲产品管理总经理沈斌向与会者展示了刚刚发布的摩托罗拉智尚-XT800手机,并在主题演讲中指出,2010年中国将成为世界上首个拥有1亿台智能手机用户的市场。“在中国,我们会帮助开发伙伴通过运营商渠道和其他第三方渠道进行增值开拓。”摩托罗拉公司生态系统部高级总监Cl
企业动态  InForce推新一代社交ERP  近日,Infor公司宣布在salesforce.com的社交企业平台Force.com上推出3个InForce应用。分别创建并交付InForce Everywhere, InForce Order Management和InForce Marketing。InForce Everywhere是一个将ERP数据带入Salesforce的Force.co
2009年,当IBM提出“流计算”(Stream computing)时,它还只是一种数学算法,使系统和应用程序能够从庞大且多样的连续数据流当中提取有效的知识和信息。然而今天,流计算已经变成现实——在澳大利亚的早产儿监护中心,流计算正在对婴儿心跳、血压等数十种监测数据进行实时分析,让医生能够根据可疑的呼吸指数,在婴儿出现新生儿肺炎以前就做出判断。对于早产儿比率高达17%的澳大利亚来说,流计算正扮演
7月7日,在美团网宣布第二轮融资的现场,CEO王兴展示了公司的银行账户,其中有6192.2122万美元余额。截止到目前,美团网已成功获得的第一轮融资金额为2000万美元,第二轮为当日宣布的5000万美元,该轮投资由阿里巴巴集团领投,北极光、华登国际以及红杉等另外三家风投跟投。在宣布了融资金额后,王兴匆忙离开,美团网副总王慧文透露,王兴正赶赴第三轮投资的谈判。   根据艾瑞咨询公布的团购行业统计数据
随着经济全球化的深入发展和现代信息技术的广泛应用,以向现代服务业及高端制造业研发环节转移为特征的世界经济新一轮产业转移,正以不可逆转的态势向前发展。大力发展现代服务业正成为发展中国家参与国际竞争、实现现代化的又一重要战略选择。    培养复合人才    到目前为止,国内很多城市已经在服务外包领域取得了不错的成绩。但是,在与国际领先的城市竞争中,人才问题,特别是应用性、复合型、国际化的服务外包人才培
8月2日,古装历史大戏新版《水浒传》在全国四大卫视开播的同时,土豆网也同步线上首播。  目前,动辄超千万元一部、五六十万元一集的大剧,使得互联网版权已成为影视剧成本回收的重要渠道,一些剧集甚至超过了传统卫视购买的价格水准,一部影视剧甚至可能仅靠出售网络版权就可以收回全部成本甚至做到盈利。多家视频网站的CEO都表示剧集太贵。不过,土豆网CEO王微在近期的内部会议上表示,尽管市场沦为一片混战,土豆网并
“天玑网络系统软件将是中科院计算所继曙光与龙芯之后的第三个战略重点。”近日,在中科院计算所举办的2011年公众科学日活动上,该所副总工、网络数据科学与工程研究中心主任程学旗展示了中科院计算所的最新研究成果——天玑系列中的舆情监测系统。  作为天玑网络系统软件的研发负责人。程学旗介绍,舆情监测系统首先要有对网络信息多通道多模式感知的能力,而天玑系列中的天玑舆情监测系统,能够实时、定向地采集互联网新闻
三菱电机空调影像设备(上海)有限公司影像事业部显示器产品销售经理陈泉涌近日在接受记者采访时表示,放眼目前整个国内显示器市场,真正能够满足顶级游戏玩家与发烧友需求的显示器迟迟未能出现。    近日,三菱电机推出一款为游戏玩家度身定制的MDL231UV宽屏液晶显示器,采用了三菱电机自主研发的MPIII(Motion Picture)引擎技术,利用LED Blinking技术及Clear Picture